JP2009058720A - Focus detector and camera - Google Patents

Focus detector and camera Download PDF

Info

Publication number
JP2009058720A
JP2009058720A JP2007225332A JP2007225332A JP2009058720A JP 2009058720 A JP2009058720 A JP 2009058720A JP 2007225332 A JP2007225332 A JP 2007225332A JP 2007225332 A JP2007225332 A JP 2007225332A JP 2009058720 A JP2009058720 A JP 2009058720A
Authority
JP
Japan
Prior art keywords
focus
lens
median
value
focus evaluation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007225332A
Other languages
Japanese (ja)
Other versions
JP4967930B2 (en
Inventor
Toshimi Watanabe
利巳 渡邉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2007225332A priority Critical patent/JP4967930B2/en
Publication of JP2009058720A publication Critical patent/JP2009058720A/en
Application granted granted Critical
Publication of JP4967930B2 publication Critical patent/JP4967930B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a focus detector capable of appropriately controlling the moving direction of a focus lens. <P>SOLUTION: The focus detector is equipped with: an integrating means 12 integrating a signal from an imaging device 2 picking up an image through a photographic lens 1; an acquiring means 12 successively acquiring focus evaluated value information showing relation between a lens position and an integrated value by the integrating means 12 while the focus lens of the photographic lens 1 is moving; a calculating means 12 calculating median for a predetermined number of focus evaluated values out of the focus evaluated value information; a detecting means 12 detecting the maximum value of the focus evaluated value information; and a deciding means 12 deciding whether or not the moving direction of the focus lens is reversed based on the maximum value and the median. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、カメラの焦点検出装置に関する。   The present invention relates to a camera focus detection apparatus.

CCDイメージセンサなどの撮像素子を用いて被写体像を撮像し、撮像素子から出力される撮像信号に基づいて撮影レンズによる焦点位置の調節状態を検出するカメラの焦点検出方法が知られている(特許文献1参照)。中でも山登り方式と呼ばれる焦点検出方法は、フォーカスレンズを光軸方向に進退駆動させながら、撮像信号の高周波数成分によるデータ、すなわち、鮮鋭度(コントラスト)を示す焦点評価値が極大値をとるように合焦位置を検出する。   A camera focus detection method is known in which a subject image is picked up using an image pickup device such as a CCD image sensor, and an adjustment state of a focus position by a photographing lens is detected based on an image pickup signal output from the image pickup device (patent). Reference 1). In particular, the focus detection method called the hill-climbing method is such that the focus evaluation value indicating the sharpness (contrast) takes the maximum value while driving the focus lens forward and backward in the optical axis direction, that is, the data by the high frequency component of the imaging signal. The focus position is detected.

特開2003−295040号公報JP 2003-295040 A

従来技術では、撮像信号に含まれるノイズなどによって異常値が発生した場合、焦点評価値を示す「山」のピーク判定して行うフォーカスレンズの移動方向の制御を適切に行えないという問題があった。   In the prior art, when an abnormal value is generated due to noise included in the imaging signal, there is a problem that it is not possible to appropriately control the moving direction of the focus lens performed by determining the peak of the “mountain” indicating the focus evaluation value. .

(1)本発明による焦点検出装置は、撮影レンズを通して撮像した撮像素子からの信号を積算する積算手段と、撮影レンズのフォーカスレンズが移動中に当該レンズ位置と積算手段による積算値との関係を示す焦点評価値情報を逐次取得する取得手段と、焦点評価値情報のうち所定数の焦点評価値についてメジアンを算出する算出手段と、焦点評価値情報の最大値を検出する検出手段と、最大値とメジアンとに基づいて、フォーカスレンズの移動方向を反転させるか否かを決定する決定手段とを備えることを特徴とする。
(2)請求項1に記載の焦点検出装置において、算出手段は、撮像される画像が変化する場合に所定数を大きくすることもできる。
(3)請求項1または2に記載の焦点検出装置において、決定手段は、直近の所定数の焦点評価値について算出されたメジアンが前回算出されたメジアンから所定値を超えて減少しない場合、フォーカスレンズの移動方向の維持を決定することが好ましい。
(4)請求項3に記載の焦点検出装置において、決定手段は、直近の所定数の焦点評価値について算出されたメジアンが前回算出されたメジアンから所定値を超えて減少し、かつ直近のメジアンが最大値より小さい判定閾値よりさらに小さい場合にフォーカスレンズの移動方向の反転を決定することが好ましい。
(5)本発明によるカメラは、請求項1〜請求項4のいずれか一項に記載の焦点検出装置を有することを特徴とする。
(1) The focus detection device according to the present invention is configured to integrate a signal from an image pickup element picked up through a photographing lens, and a relationship between the lens position and the integrated value obtained by the integrating device while the focus lens of the photographing lens is moving. Acquisition means for sequentially acquiring the focus evaluation value information to be shown, calculation means for calculating the median for a predetermined number of focus evaluation values in the focus evaluation value information, detection means for detecting the maximum value of the focus evaluation value information, and the maximum value And determining means for determining whether to reverse the moving direction of the focus lens based on the median.
(2) In the focus detection apparatus according to the first aspect, the calculating means can increase the predetermined number when the captured image changes.
(3) In the focus detection apparatus according to (1) or (2), when the median calculated for the most recent predetermined number of focus evaluation values does not decrease beyond the predetermined value from the previously calculated median, It is preferable to determine the maintenance of the moving direction of the lens.
(4) In the focus detection apparatus according to (3), the deciding means decreases the median calculated for the most recent predetermined number of focus evaluation values from the previously calculated median beyond a predetermined value, and the latest median It is preferable to determine the reversal of the moving direction of the focus lens when is smaller than a determination threshold smaller than the maximum value.
(5) A camera according to the present invention includes the focus detection device according to any one of claims 1 to 4.

本発明によれば、フォーカスレンズの移動方向を適切に制御できる。   According to the present invention, the moving direction of the focus lens can be appropriately controlled.

以下、図面を参照して本発明を実施するための最良の形態について説明する。図1は、本発明の一実施の形態によるオートフォーカス(AF)電子カメラの要部構成を説明するブロック図である。図1において、電子カメラは、レンズユニット1と、撮像素子2と、A/D変換器3と、メモリ4と、画像処理回路5と、コントロール回路8と、CPU12と、モータ13と、フォーカス制御機構14と、操作部材15とを有する。   The best mode for carrying out the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram for explaining a main configuration of an autofocus (AF) electronic camera according to an embodiment of the present invention. In FIG. 1, an electronic camera includes a lens unit 1, an image sensor 2, an A / D converter 3, a memory 4, an image processing circuit 5, a control circuit 8, a CPU 12, a motor 13, and focus control. A mechanism 14 and an operation member 15 are provided.

レンズユニット1は、不図示のフォーカスレンズを含む。フォーカスレンズは、レンズユニット1を通過した被写体光束が撮像素子2の撮像面上に像を結ぶように、焦点位置を調節するレンズである。モータ13がフォーカス制御機構14を駆動することにより、フォーカス制御機構14がフォーカスレンズを光軸方向に進退移動させる。モータ13は、CPU12から出力されるレンズ駆動信号によって駆動される。   The lens unit 1 includes a focus lens (not shown). The focus lens is a lens that adjusts the focal position so that the subject luminous flux that has passed through the lens unit 1 forms an image on the imaging surface of the imaging device 2. When the motor 13 drives the focus control mechanism 14, the focus control mechanism 14 moves the focus lens back and forth in the optical axis direction. The motor 13 is driven by a lens driving signal output from the CPU 12.

撮像素子2は、たとえば、二次元CCDイメージセンサなどによって構成される。撮像素子2は、撮像面上の被写体像を撮像し、各画素に対応する撮像信号を出力する。撮像素子2から出力される撮像信号は、各画素に入射される光の強さに応じてその信号レベルが異なる。なお、撮像素子2は、CCDの代わりにMOSセンサやCIDなどを用いて構成してもよい。コントロール回路8は、撮像素子2に対するタイミング信号を生成して撮像素子2へ送出する。   The image sensor 2 is configured by, for example, a two-dimensional CCD image sensor. The imaging element 2 captures a subject image on the imaging surface and outputs an imaging signal corresponding to each pixel. The image signal output from the image sensor 2 has a different signal level depending on the intensity of light incident on each pixel. Note that the image sensor 2 may be configured using a MOS sensor, a CID, or the like instead of the CCD. The control circuit 8 generates a timing signal for the image sensor 2 and sends it to the image sensor 2.

撮像素子2から出力された撮像信号は、A/D変換器3によってディジタル信号に変換された後でメモリ4に格納される。画像処理回路5は、メモリ4に格納された画像データに対して所定の方式(たとえば、JPEG)で圧縮処理を施し、圧縮処理後の画像データを外部記憶回路6に記憶させる。画像処理回路5は、外部記憶回路6に記録されている圧縮データを読み出して伸長する際の伸長処理も行う。外部記憶回路6は、たとえば、メモリカードなどのデータストレージ部材によって構成される。   The image pickup signal output from the image pickup device 2 is converted into a digital signal by the A / D converter 3 and then stored in the memory 4. The image processing circuit 5 performs compression processing on the image data stored in the memory 4 by a predetermined method (for example, JPEG), and stores the compressed image data in the external storage circuit 6. The image processing circuit 5 also performs decompression processing when the compressed data recorded in the external storage circuit 6 is read and decompressed. The external storage circuit 6 is configured by a data storage member such as a memory card, for example.

CPU12は、AE/AWB回路7と、バンドパスフィルタ(BPF)9と、積算回路10と、AF回路11とを含む。CPU12は、コントロール回路8、メモリ4などと接続され、電子カメラの焦点検出(AF)や測光(AE)、ホワイトバランス調整(AWB)などの各種演算とカメラ動作のシーケンス制御とを行う。CPU12には、操作部材15から各種操作信号が入力される。CPU12は、操作部材15から入力される操作信号に応じて、電子カメラの焦点検出制御、露出制御、およびカラーバランス制御を総括的に管理する。   The CPU 12 includes an AE / AWB circuit 7, a band pass filter (BPF) 9, an integration circuit 10, and an AF circuit 11. The CPU 12 is connected to the control circuit 8, the memory 4, and the like, and performs various calculations such as focus detection (AF), photometry (AE), white balance adjustment (AWB) of the electronic camera, and sequence control of camera operation. Various operation signals are input from the operation member 15 to the CPU 12. The CPU 12 comprehensively manages focus detection control, exposure control, and color balance control of the electronic camera in accordance with an operation signal input from the operation member 15.

AE/AWB回路7は、周知の露出演算やホワイトバランス調整処理を行う。ホワイトバランス調整処理は、メモリ4に格納されている画像データに対して行われる。   The AE / AWB circuit 7 performs known exposure calculation and white balance adjustment processing. The white balance adjustment process is performed on the image data stored in the memory 4.

バンドパスフィルタ9は、メモリ4に格納されている画像処理前の画像データのうち、焦点検出用の領域(AFエリア)に対応する画像データから差分成分を抽出したり、高周波数成分を抽出したりするフィルタである。バンドパスフィルタ9によるフィルタ処理後の画像データは、フィルタ処理前の画像データに比べて、低周波数成分、とくに直流成分が除去されている。   The band pass filter 9 extracts a difference component from image data corresponding to a focus detection area (AF area) from image data before image processing stored in the memory 4 or extracts a high frequency component. Filter. The image data after the filter processing by the band pass filter 9 has a lower frequency component, particularly a direct current component, removed than the image data before the filter processing.

積算回路10は、バンドパスフィルタ9によってフィルタ処理された画像データを積算する。積算処理では、高周波数成分による差分を積算するために、画像データの絶対値が積算される。   The integrating circuit 10 integrates the image data filtered by the band pass filter 9. In the integration process, the absolute values of the image data are integrated in order to integrate the differences due to the high frequency components.

AF回路11は、積算回路10による積算値を用いて焦点評価値(コントラスト値)を得る。図2は、撮影レンズ1内の不図示のフォーカスレンズの位置と焦点評価値との関係の一例を示す図である。図2において、横軸はフォーカスレンズの位置であり、縦軸は焦点評価値を表す。焦点評価値曲線L21のピークに対応するレンズ位置D1は、主要被写体に対するフォーカスレンズの合焦位置である。   The AF circuit 11 obtains a focus evaluation value (contrast value) using the integrated value obtained by the integrating circuit 10. FIG. 2 is a diagram illustrating an example of the relationship between the position of a focus lens (not shown) in the photographing lens 1 and the focus evaluation value. In FIG. 2, the horizontal axis represents the position of the focus lens, and the vertical axis represents the focus evaluation value. A lens position D1 corresponding to the peak of the focus evaluation value curve L21 is the focus position of the focus lens with respect to the main subject.

本実施形態のAF回路11(CPU12)は、焦点評価値が増加する方向へフォーカスレンズを移動させ、焦点評価値が増加から減少に転じるとフォーカスレンズの移動方向を反転させる反転駆動動作を繰り返しながら、焦点評価値の「山」のピークを求める。図3は、フォーカスレンズの動きと焦点評価値の変化の一例を説明する図である。図3において、上段の波形は焦点評価値を表す曲線L32であり、下段の波形はフォーカスレンズの動きを表す曲線L31である。上下段ともに横軸は時間であり、上段の縦軸は焦点評価値の大きさ、下段の縦軸はフォーカスレンズの位置をそれぞれ表す。   The AF circuit 11 (CPU 12) of this embodiment moves the focus lens in a direction in which the focus evaluation value increases, and repeats a reversal drive operation that reverses the movement direction of the focus lens when the focus evaluation value changes from increase to decrease. The peak of the focus evaluation value “mountain” is obtained. FIG. 3 is a diagram illustrating an example of the movement of the focus lens and the change in the focus evaluation value. In FIG. 3, the upper waveform is a curve L32 representing the focus evaluation value, and the lower waveform is a curve L31 representing the movement of the focus lens. In both the upper and lower stages, the horizontal axis represents time, the upper vertical axis represents the magnitude of the focus evaluation value, and the lower vertical axis represents the position of the focus lens.

AF回路11は、たとえば、時刻t0にフォーカスレンズを∞(無限遠)端から至近端方向へ向けて移動を開始させる。フォーカスレンズが時刻t1に合焦位置を通過すると、焦点評価値は減少に転ずる。AF回路11は、時刻t2においてフォーカスレンズの移動を一旦停止させ、時刻t3に至近端から∞端方向へ向けて移動を開始させる。   For example, the AF circuit 11 starts moving the focus lens from the ∞ (infinity) end toward the close end at time t0. When the focus lens passes the in-focus position at time t1, the focus evaluation value starts to decrease. The AF circuit 11 temporarily stops the movement of the focus lens at time t2, and starts moving from the closest end toward the ∞ end at time t3.

AF回路11は、同様の反転駆動動作を繰り返しながら(時刻t3〜t6)焦点評価値の「山」のピークを求め、ピークに対応するレンズ位置P31へフォーカスレンズを移動させて合焦状態を得る(時刻t7)。   The AF circuit 11 obtains the peak of the focus evaluation value “mountain” while repeating the same inversion driving operation (time t3 to t6), and moves the focus lens to the lens position P31 corresponding to the peak to obtain a focused state. (Time t7).

上記AF電子カメラのCPU12が行うAF処理について、図4および図5のフローチャートを参照して説明する。図4による処理は、たとえば、操作部材15を構成するレリーズスイッチから半押し操作信号がCPU12に入力されると開始される。図4のステップS1において、CPU12は、処理に必要なフラグ類を初期化してステップS2へ進む。   The AF process performed by the CPU 12 of the AF electronic camera will be described with reference to the flowcharts of FIGS. The process shown in FIG. 4 is started when, for example, a half-press operation signal is input to the CPU 12 from a release switch constituting the operation member 15. In step S1 of FIG. 4, the CPU 12 initializes flags necessary for the process and proceeds to step S2.

ステップS2において、CPU12はAFエリアを決定してステップS3へ進む。AFエリアは、たとえば、操作部材15を構成するAFエリア選択スイッチからの操作信号に応じて決定する。ステップS3において、CPU12は、後述するメジアン計算に用いるデータ数を決定してステップS4へ進む。   In step S2, the CPU 12 determines an AF area and proceeds to step S3. The AF area is determined in accordance with, for example, an operation signal from an AF area selection switch that constitutes the operation member 15. In step S3, the CPU 12 determines the number of data used for median calculation described later, and proceeds to step S4.

CPU12は通常、メジアン計算時のデータ数を3個とするが、以下に列記する条件のいずれかに該当する場合は、データ数をより大きな数(たとえば、5個)に変更する。
[1]被写体の中にフリッカ光源(明るさが周期的に変化するもの)が含まれる場合
[2]被写体輝度が所定値(たとえばLv5)以下の場合
[3]撮影倍率が所定値(たとえば1/5倍)以上の場合
[4]被写体が移動している場合
The CPU 12 normally sets the number of data at the time of median calculation to three, but if any of the conditions listed below is met, the number of data is changed to a larger number (for example, five).
[1] When the subject includes a flicker light source (one whose brightness changes periodically) [2] When the subject brightness is a predetermined value (for example, Lv5) or less [3] The photographing magnification is a predetermined value (for example, 1) / 5 times) or more [4] When the subject is moving

CPU12は、上記条件判定を行うために、フィルタ処理していない生の画像データを積算することによって輝度情報を取得する。輝度情報が周期的に変化する場合、撮影画面にフリッカ光源が含まれると判定する。また、輝度情報(Bv)と感度情報(Sv)の和がLvに相当する。   In order to perform the condition determination, the CPU 12 acquires luminance information by integrating raw image data that has not been filtered. When the luminance information changes periodically, it is determined that the flicker light source is included in the shooting screen. Further, the sum of luminance information (Bv) and sensitivity information (Sv) corresponds to Lv.

ステップS4において、CPU12は、積算回路10による積算値(焦点評価値)を取得してステップS5へ進む。ステップS5において、CPU12は、フォーカスレンズの位置情報を計算してステップS6へ進む。フォーカスレンズの位置は、たとえば、フォーカス制御機構14からレンズ位置を示す情報を入力して算出する。   In step S4, the CPU 12 acquires the integrated value (focus evaluation value) by the integrating circuit 10, and proceeds to step S5. In step S5, the CPU 12 calculates focus lens position information and proceeds to step S6. The position of the focus lens is calculated by inputting information indicating the lens position from the focus control mechanism 14, for example.

ステップS6において、CPU12は履歴データを更新してステップS7へ進む。具体的には、焦点評価値の履歴データHisFVal[n]と、レンズ位置情報の履歴データHisLPave[n]とを関連づけてAF回路11内にそれぞれ記憶する。nは取得順を表し、取得順に直近のものから0,1,2,…とする。   In step S6, the CPU 12 updates the history data and proceeds to step S7. Specifically, the focus evaluation value history data HisFVal [n] and the lens position information history data HisLPave [n] are stored in the AF circuit 11 in association with each other. n represents the order of acquisition, and 0, 1, 2,...

ステップS7において、CPU12はメジアン計算を行う。CPU12は、焦点評価値の履歴データHisFVal[n]のうち直近の3個(ステップS3において決定したデータ数に対応)のメジアン(中央値)を計算し、メジアン履歴データHisFValMedian[n]としてAF回路11内に記憶してステップS8へ進む。   In step S7, the CPU 12 performs median calculation. The CPU 12 calculates the median (median value) of the latest three (corresponding to the number of data determined in step S3) among the focus evaluation value history data HisFVal [n], and uses the AF circuit as median history data HisFValMedian [n]. 11 and proceed to step S8.

ステップS8において、CPU12は、焦点評価値の履歴データHisFVal[n]の中から最大値FValMaxを算出してステップS9へ進む。ステップS9において、CPU12はフォーカスレンズの移動量を計算してステップS10へ進む。フォーカスレンズの駆動量計算の詳細については後述する。   In step S8, the CPU 12 calculates the maximum value FValMax from the focus evaluation value history data HisFVal [n], and proceeds to step S9. In step S9, the CPU 12 calculates the amount of movement of the focus lens and proceeds to step S10. Details of calculation of the driving amount of the focus lens will be described later.

ステップS10において、CPU12は合焦停止判定を行う。CPU12は、焦点評価値の「山」のピーク越えを所定回数行った(すなわち、反転駆動動作を所定回繰り返した)場合にステップS10を肯定判定してステップS11へ進む。CPU12は、焦点評価値の「山」のピーク越えを所定回数行っていない場合にはステップS10を否定判定し、ステップS4へ戻る。ステップS4へ戻るのは、フォーカスレンズの反転駆動動作を繰り返す場合である。   In step S10, the CPU 12 performs in-focus stop determination. The CPU 12 makes an affirmative determination in step S10 and proceeds to step S11 when the focus evaluation value “peak” exceeds the peak of the predetermined number of times (that is, the reversal driving operation is repeated a predetermined number of times). If the CPU 12 has not exceeded the peak of the “peak” of the focus evaluation value a predetermined number of times, the CPU 12 makes a negative determination in step S10 and returns to step S4. The process returns to step S4 when the focus lens inversion driving operation is repeated.

ステップS11において、CPU12は、焦点評価値の履歴データHisFVal[n]のうち最大値FValMaxを含む3つの履歴データを用いて3点内挿演算を行うことにより、フォーカスレンズの合焦位置FocusPosを算出する。CPU12は、フォーカスレンズを合焦位置FocusPosへ移動させてステップS12へ進む。   In step S11, the CPU 12 calculates a focus position FocusPos of the focus lens by performing a three-point interpolation operation using three history data including the maximum value FValMax among the focus evaluation value history data HisFVal [n]. To do. The CPU 12 moves the focus lens to the in-focus position FocusPos and proceeds to step S12.

ステップS12において、CPU12は再起動準備を行ってステップS13へ進む。具体的には、合焦位置FocusPosへフォーカスレンズを移動終了後に積算回路10による積算値(焦点評価値)を取得する。CPU12はさらに、取得した焦点評価値をFValRestartとしてAF回路11内に記憶する。また、CPU12は、このときの輝度情報を再起動判定輝度値BVRestartとしてAF回路11内に記憶する。輝度情報は、上述した通り、フィルタ処理されていない生の画像データを積算することによって得る。   In step S12, the CPU 12 prepares for restart and proceeds to step S13. Specifically, an integrated value (focus evaluation value) by the integrating circuit 10 is acquired after the focus lens is moved to the in-focus position FocusPos. The CPU 12 further stores the acquired focus evaluation value in the AF circuit 11 as FValRestart. Further, the CPU 12 stores the luminance information at this time in the AF circuit 11 as the restart determination luminance value BVRestart. Luminance information is obtained by integrating raw image data that has not been filtered as described above.

ステップS13において、CPU12は、積算回路10による積算値(焦点評価値)を取得してステップS14へ進む。なお、このときの輝度情報も取得する。ステップS14において、CPU12は、フォーカスレンズの位置情報を計算してステップS15へ進む。   In step S13, the CPU 12 acquires the integrated value (focus evaluation value) by the integrating circuit 10, and proceeds to step S14. Note that the luminance information at this time is also acquired. In step S14, the CPU 12 calculates position information of the focus lens and proceeds to step S15.

ステップS15において、CPU12は履歴データを更新してステップS16へ進む。具体的には、焦点評価値の履歴データHisFVal[n]と、レンズ位置情報の履歴データHisLPave[n]とを関連づけてAF回路11内にそれぞれ記憶する。nは取得順を表し、直近のものから0,1,2,…とする。   In step S15, the CPU 12 updates the history data and proceeds to step S16. Specifically, the focus evaluation value history data HisFVal [n] and the lens position information history data HisLPave [n] are stored in the AF circuit 11 in association with each other. n represents the order of acquisition, and 0, 1, 2, ... from the most recent one.

ステップS16において、CPU12はメジアン計算を行う。CPU12は、焦点評価値の履歴データHisFVal[n]のうち直近の3個(ステップS3において決定したデータ数に対応)のメジアン(中央値)を計算し、メジアン履歴データHisFValMedian[n]としてAF回路11内に記憶してステップS17へ進む。   In step S16, the CPU 12 performs median calculation. The CPU 12 calculates the median (median value) of the latest three (corresponding to the number of data determined in step S3) among the focus evaluation value history data HisFVal [n], and uses the AF circuit as median history data HisFValMedian [n]. 11 and proceed to step S17.

ステップS17において、CPU12は、焦点評価値の履歴データHisFVal[n]の中から最大値FValMaxを算出してステップS18へ進む。ステップS18において、CPU12は再起動判定を行う。CPU12は、下記条件のいずれかに該当する場合にステップS18を肯定判定してステップS2へ戻る。CPU12は、下記条件のいずれにも該当しない場合にはステップS18を否定判定し、ステップS13へ戻る。   In step S17, the CPU 12 calculates the maximum value FValMax from the focus evaluation value history data HisFVal [n], and proceeds to step S18. In step S18, the CPU 12 performs a restart determination. If any of the following conditions is met, the CPU 12 makes a positive determination in step S18 and returns to step S2. If none of the following conditions is satisfied, the CPU 12 makes a negative determination in step S18 and returns to step S13.

[1]ステップS13で取得した最大値FValMaxが、焦点評価値FValRestartに対して所定値以上変化している場合
[2]ステップS13で取得した輝度情報が、再起動判定輝度値BVRestartに対して所定値以上変化している場合
[3]合焦判定(ステップS10)後に所定時間が経過した場合
[4]操作部材15からズーム操作信号が入力された場合
[1] When the maximum value FValMax acquired in step S13 changes by a predetermined value or more with respect to the focus evaluation value FValRestart [2] The luminance information acquired in step S13 is predetermined for the restart determination luminance value BVRestart. [3] When a predetermined time has elapsed after the focus determination (step S10) [4] When a zoom operation signal is input from the operation member 15

フォーカスレンズの駆動量計算の詳細について、図5のフローチャートを参照して説明する。図5のステップS1001において、CPU12は、焦点評価値のメジアンが前回算出したメジアンと比べて所定値以上減少しているか否かを判定する。CPU12は、直近のメジアン履歴データHisFValMedian[n]が前回算出値から所定値を超えて減少している場合にステップS1001を肯定判定してステップS1003へ進む。CPU12は、直近のメジアン履歴データHisFValMedian[n]の前回算出値からの減少幅が所定値に満たない場合、前回算出値より増加している場合にはステップS1001を否定判定し、ステップS1002へ進む。   Details of the focus lens drive amount calculation will be described with reference to the flowchart of FIG. In step S1001 of FIG. 5, the CPU 12 determines whether or not the median of the focus evaluation value has decreased by a predetermined value or more compared to the median calculated last time. If the latest median history data HisFValMedian [n] has decreased beyond the predetermined value from the previous calculated value, the CPU 12 makes an affirmative decision in step S1001 and proceeds to step S1003. When the decrease amount from the previous calculated value of the latest median history data HisFValMedian [n] is less than the predetermined value, the CPU 12 makes a negative determination in step S1001 if it has increased from the previous calculated value, and proceeds to step S1002. .

ステップS1002において、CPU12は、現在のフォーカスレンズの移動方向を維持させて図5による処理を終了し、図4へ戻る。フォーカスレンズの移動方向を維持するのは、図6(a)に例示するように、焦点評価値が増加する方向へフォーカスレンズを移動させている場合に対応する。図6(a)は、フォーカスレンズの移動と図5のフローチャートとの対応関係を説明する図である。   In step S1002, the CPU 12 maintains the current moving direction of the focus lens, ends the process of FIG. 5, and returns to FIG. Maintaining the moving direction of the focus lens corresponds to the case where the focus lens is moved in the direction in which the focus evaluation value increases, as illustrated in FIG. FIG. 6A is a diagram for explaining the correspondence between the movement of the focus lens and the flowchart of FIG.

ステップS1003において、CPU12は、フォーカスレンズ移動によって焦点評価値がピークを越えたか否かを判定する。CPU12は、下記条件のいずれかに該当する場合にステップS1003を肯定判定してステップS1005へ進む。CPU12は、下記条件のいずれにも該当しない場合にはステップS1003を否定判定し、ステップS1004へ進む。   In step S1003, the CPU 12 determines whether or not the focus evaluation value exceeds the peak due to the focus lens movement. If any of the following conditions is met, the CPU 12 makes a positive determination in step S1003 and proceeds to step S1005. If none of the following conditions is satisfied, the CPU 12 makes a negative determination in step S1003 and proceeds to step S1004.

[1]焦点評価値のメジアン履歴データHisFValMedian[n]が、最大値FValMaxに対して所定値以上減少している場合
[2]再起動後のフォーカスレンズの駆動開始時に取得した焦点評価値が、最大値FValMaxと異なる場合
[1] When the median history data HisFValMedian [n] of the focus evaluation value is decreased by a predetermined value or more with respect to the maximum value FValMax [2] The focus evaluation value acquired at the start of driving of the focus lens after restart is When different from the maximum value FValMax

ステップS1004において、CPU12は、現在のフォーカスレンズの移動方向を反転させて図5による処理を終了し、図4へ戻る。フォーカスレンズの移動方向を反転するのは、図6(b)に例示するように、再起動後のフォーカスレンズ移動によって焦点評価値が減少した場合に対応する。図6(b)は、フォーカスレンズの移動と図5のフローチャートとの対応関係を説明する図である。   In step S1004, the CPU 12 reverses the current moving direction of the focus lens, ends the process of FIG. 5, and returns to FIG. Reversing the moving direction of the focus lens corresponds to the case where the focus evaluation value is decreased due to the movement of the focus lens after the restart as illustrated in FIG. 6B. FIG. 6B is a diagram for explaining the correspondence between the movement of the focus lens and the flowchart of FIG.

ステップS1005において、CPU12は、焦点評価値の履歴データHisFVal[n]に基づいてピーク位置(対応する合焦位置)へのレンズ移動量(駆動量)を算出して図5による処理を終了し、図4へ戻る。焦点評価値履歴曲線のピーク越えを判定するのは、図6(c)に例示するように、焦点評価値が増加から減少に転じた場合である。図6(c)は、フォーカスレンズの移動と図5のフローチャートとの対応関係を説明する図である。   In step S1005, the CPU 12 calculates the lens movement amount (drive amount) to the peak position (corresponding in-focus position) based on the focus evaluation value history data HisFVal [n], and ends the processing of FIG. Returning to FIG. Whether the focus evaluation value history curve exceeds the peak is determined when the focus evaluation value is changed from increasing to decreasing, as illustrated in FIG. 6C. FIG. 6C is a diagram for explaining the correspondence between the movement of the focus lens and the flowchart of FIG.

本実施形態の作用効果について、図7を参照して説明する。図7は、とくに焦点評価値が増加から減少に転じる付近においてフォーカスレンズの動きと焦点評価値の変化を例示するものである。図7において、上段の波形は焦点評価値を表す理想曲線L61であり、下段の波形はフォーカスレンズの動きを表す曲線LM61である。上下段ともに横軸は時間であり、上段の縦軸は焦点評価値の大きさ、下段の縦軸はフォーカスレンズの位置をそれぞれ表す。   The effect of this embodiment is demonstrated with reference to FIG. FIG. 7 exemplifies the movement of the focus lens and the change in the focus evaluation value, particularly in the vicinity where the focus evaluation value changes from increasing to decreasing. In FIG. 7, the upper waveform is an ideal curve L61 representing the focus evaluation value, and the lower waveform is a curve LM61 representing the movement of the focus lens. In both the upper and lower stages, the horizontal axis represents time, the upper vertical axis represents the magnitude of the focus evaluation value, and the lower vertical axis represents the position of the focus lens.

判定閾値V61は、焦点評価値の最大値FValMaxに対応する。判定閾値V62は、ピーク越え判定に用いる判定閾値(最大値FValMaxより所定値Δh低い値)に対応する。CPU12は、時刻t61にフォーカスレンズを移動開始させるとともに、所定間隔で焦点評価値FV201、FV202、…、FV208、FV209をそれぞれ取得する。図7の例では、焦点評価値の最大値FValMaxを取得した時刻t63より前の時刻t62において、画像データにノイズが重畳する。これにより、時刻t62で取得された焦点評価値FV204は一時的に減少し、時刻t62より前に取得された焦点評価値FV202、FV201より小さくなり、理想曲線L61と大きく異なる。   The determination threshold value V61 corresponds to the maximum focus evaluation value FValMax. The determination threshold value V62 corresponds to a determination threshold value (a value that is lower than the maximum value FValMax by a predetermined value Δh) used for peak crossing determination. The CPU 12 starts moving the focus lens at time t61 and obtains focus evaluation values FV201, FV202,..., FV208, FV209 at predetermined intervals. In the example of FIG. 7, noise is superimposed on the image data at time t62 before time t63 when the maximum focus evaluation value FValMax is acquired. Thereby, the focus evaluation value FV204 acquired at time t62 temporarily decreases, becomes smaller than the focus evaluation values FV202 and FV201 acquired before time t62, and is greatly different from the ideal curve L61.

(1)焦点評価値の履歴データHisFVal[n]のうち直近の3個(ステップS3において決定したデータ数に対応)のメジアンを算出し、このメジアン算出値が前回のメジアン算出値から減少した減少幅が所定値に満たない場合(前回のメジアン算出値から増加している場合も含む)は、フォーカスレンズの移動方向(駆動方向)を維持するようにした。これにより、たとえば焦点評価値VF202、VF203、VF204のうち、1回の異常値(VF204)によって焦点評価値履歴が減少したと誤判定することを防止できる。メジアンを用いたことで、移動平均を用いる場合よりも焦点評価値履歴の減少を判定する精度を高め、フォーカスレンズの移動方向を適切に制御することができる。 (1) The median of the three most recent values (corresponding to the number of data determined in step S3) of the focus evaluation value history data HisFVal [n] is calculated, and this median calculated value is decreased from the previous median calculated value. When the width is less than the predetermined value (including the case where the width is increased from the previous median calculation value), the movement direction (drive direction) of the focus lens is maintained. Thereby, for example, it is possible to prevent erroneous determination that the focus evaluation value history is reduced by one abnormal value (VF204) among the focus evaluation values VF202, VF203, and VF204. By using the median, it is possible to improve the accuracy of determining the decrease in the focus evaluation value history and to appropriately control the moving direction of the focus lens, compared to the case of using the moving average.

(2)焦点評価値の履歴データHisFVal[n]のうち直近の3個(ステップS3において決定したデータ数に対応)のメジアンを算出し、このメジアン算出値が判定閾値V62より小さい場合にピーク越えを判定するようにした。これにより、上記(1)の場合と同様に、たとえば焦点評価値VF207、VF208、VF209のうちいずれかに異常値が含まれる場合であっても、焦点評価値履歴曲線のピーク越えを誤判定することを防止し、フォーカスレンズの移動方向を適切に制御することができる。 (2) The median of the latest three (corresponding to the number of data determined in step S3) of the focus evaluation value history data HisFVal [n] is calculated, and the peak is exceeded when this median calculated value is smaller than the determination threshold value V62. Judgment was made. As a result, as in the case of (1) above, even when an abnormal value is included in any of the focus evaluation values VF207, VF208, and VF209, for example, it is erroneously determined that the peak of the focus evaluation value history curve has been exceeded. This can be prevented and the moving direction of the focus lens can be appropriately controlled.

(3)ステップS3において、メジアン計算時のデータ数を通常3個とし、上述した4つの条件のいずれかに該当する場合は、メジアン算出時のデータ数をより大きな数に変更するようにした。画像が変化しやすい(焦点評価値にばらつきが生じやすい)状況でデータ数を増やすことにより、焦点評価値履歴の一部に異常値が発生したとしても、焦点評価値履歴が減少したと誤判定すること、焦点評価値履歴曲線のピーク越えを誤判定することを防止できる。 (3) In step S3, the number of data at the time of median calculation is normally three, and when any of the above four conditions is met, the number of data at the time of median calculation is changed to a larger number. Even if an abnormal value occurs in a part of the focus evaluation value history by increasing the number of data in a situation where the image is likely to change (the focus evaluation value is likely to vary), it is erroneously determined that the focus evaluation value history has decreased. It is possible to prevent erroneous determination of exceeding the peak of the focus evaluation value history curve.

(変形例1)
ステップS3の説明では、メジアン計算時のデータ数を決定するために、画像が変化しやすい(焦点評価値にばらつきが生じやすい)状況として4つの場合を例示した。上記4つの判定条件に加えて、以下の4例をさらに含めてもよい。
[5]撮影感度が所定感度より高い場合
[6]手振れ補正機構がオフされている場合
[7]夜景撮影モードに設定されている場合
[8]マクロ撮影モードに設定されている場合
(Modification 1)
In the description of step S3, in order to determine the number of data at the time of median calculation, four cases are exemplified as situations in which an image is likely to change (focal evaluation values tend to vary). In addition to the above four determination conditions, the following four examples may be further included.
[5] When the shooting sensitivity is higher than the predetermined sensitivity [6] When the image stabilization mechanism is turned off [7] When set to the night scene shooting mode [8] When set to the macro shooting mode

(変形例2)
メジアン算出に用いるデータ数は、上述した3個または5個に限ることなく、奇数であれば7個であっても9個であってもよい。データ数を増やすことで、複数の異常値が発生するおそれがある場合にも対応できる。
(Modification 2)
The number of data used for median calculation is not limited to three or five as described above, and may be seven or nine as long as it is an odd number. By increasing the number of data, it is possible to cope with a case where a plurality of abnormal values may occur.

(変形例3)
AF処理時にフォーカスレンズを∞(無限遠)端から至近端方向へ向けて移動を開始させる例を説明したが、反対に至近端から無限遠方向へ向けて移動を開始させるようにしてもよい。
(Modification 3)
The example of starting the movement of the focus lens from the infinity (infinity) end toward the near end during AF processing has been described, but conversely, the movement of the focus lens from the nearest end toward the infinity may be started. Good.

(変形例4)
ステップS2の説明では、AFエリア選択スイッチからの操作信号に応じてAFエリアを決定する例を説明したが、複数のAFエリアの中からCPU12が自動選択するように構成してもよい。
(Modification 4)
In the description of step S2, the example in which the AF area is determined according to the operation signal from the AF area selection switch has been described, but the CPU 12 may be configured to automatically select from a plurality of AF areas.

(変形例5)
電子カメラに限らず、銀塩カメラの焦点検出装置に本発明を適用してもよい。この場合には、撮影用の感光部材と別に焦点検出用の撮像素子を備えればよい。
(Modification 5)
You may apply this invention not only to an electronic camera but to the focus detection apparatus of a silver salt camera. In this case, an imaging element for focus detection may be provided separately from the photosensitive member for photographing.

以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。   The above description is merely an example, and is not limited to the configuration of the above embodiment.

本発明の一実施の形態によるAF電子カメラの要部構成を説明するブロック図である。It is a block diagram explaining the principal part structure of AF electronic camera by one embodiment of this invention. フォーカスレンズの位置と焦点評価値との関係の一例を示す図である。It is a figure which shows an example of the relationship between the position of a focus lens, and a focus evaluation value. フォーカスレンズの動きと焦点評価値の変化の一例を説明する図である。It is a figure explaining an example of a motion of a focus lens, and a change of a focus evaluation value. AF処理について説明するフローチャートである。It is a flowchart explaining AF processing. フォーカスレンズの駆動量計算について説明するフローチャートである。It is a flowchart explaining the drive amount calculation of a focus lens. フォーカスレンズの移動と図5との対応関係を説明する図である。FIG. 6 is a diagram illustrating a correspondence relationship between movement of the focus lens and FIG. 5. 焦点評価値が増加から減少に転じる付近においてフォーカスレンズの動きと焦点評価値の変化を例示する図である。It is a figure which illustrates the movement of a focus lens, and the change of a focus evaluation value in the vicinity where a focus evaluation value changes from increase to decrease.

符号の説明Explanation of symbols

1…レンズユニット
2…撮像素子
9…バンドパスフィルタ
10…積算回路
11…AF回路
12…CPU
DESCRIPTION OF SYMBOLS 1 ... Lens unit 2 ... Image pick-up element 9 ... Band pass filter 10 ... Integration circuit 11 ... AF circuit 12 ... CPU

Claims (5)

撮影レンズを通して撮像した撮像素子からの信号を積算する積算手段と、
前記撮影レンズのフォーカスレンズが移動中に当該レンズ位置と前記積算手段による積算値との関係を示す焦点評価値情報を逐次取得する取得手段と、
前記焦点評価値情報のうち所定数の焦点評価値についてメジアンを算出する算出手段と、
前記焦点評価値情報の最大値を検出する検出手段と、
前記最大値と前記メジアンとに基づいて、前記フォーカスレンズの移動方向を反転させるか否かを決定する決定手段とを備えることを特徴とする焦点検出装置。
Integrating means for integrating the signals from the image sensor imaged through the taking lens;
Acquisition means for sequentially acquiring focus evaluation value information indicating a relationship between the lens position and the integrated value by the integrating means while the focus lens of the photographing lens is moving;
Calculating means for calculating a median for a predetermined number of focus evaluation values in the focus evaluation value information;
Detecting means for detecting a maximum value of the focus evaluation value information;
A focus detection apparatus comprising: a determination unit configured to determine whether to reverse the moving direction of the focus lens based on the maximum value and the median.
請求項1に記載の焦点検出装置において、
前記算出手段は、前記撮像される画像が変化する場合に前記所定数を大きくすることを特徴とする焦点検出装置。
The focus detection apparatus according to claim 1,
The focus detection apparatus characterized in that the calculation means increases the predetermined number when the captured image changes.
請求項1または2に記載の焦点検出装置において、
前記決定手段は、直近の所定数の焦点評価値について算出されたメジアンが前回算出されたメジアンから所定値を超えて減少しない場合、前記フォーカスレンズの移動方向の維持を決定することを特徴とする焦点検出装置。
The focus detection apparatus according to claim 1 or 2,
The determining unit determines to maintain the moving direction of the focus lens when the median calculated for the most recent predetermined number of focus evaluation values does not decrease beyond a predetermined value from the previously calculated median. Focus detection device.
請求項3に記載の焦点検出装置において、
前記決定手段は、前記直近の所定数の焦点評価値について算出されたメジアンが前回算出されたメジアンから所定値を超えて減少し、かつ前記直近のメジアンが前記最大値より小さい判定閾値よりさらに小さい場合に前記フォーカスレンズの移動方向の反転を決定することを特徴とする焦点検出装置。
The focus detection apparatus according to claim 3,
The determining means is configured such that the median calculated for the most recent predetermined number of focus evaluation values decreases from a previously calculated median beyond a predetermined value, and the most recent median is smaller than a determination threshold smaller than the maximum value. In this case, the focus detection apparatus determines reversal of the moving direction of the focus lens.
請求項1〜請求項4のいずれか一項に記載の焦点検出装置を有することを特徴とするカメラ。   A camera comprising the focus detection device according to any one of claims 1 to 4.
JP2007225332A 2007-08-31 2007-08-31 Focus detection device Active JP4967930B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007225332A JP4967930B2 (en) 2007-08-31 2007-08-31 Focus detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007225332A JP4967930B2 (en) 2007-08-31 2007-08-31 Focus detection device

Publications (2)

Publication Number Publication Date
JP2009058720A true JP2009058720A (en) 2009-03-19
JP4967930B2 JP4967930B2 (en) 2012-07-04

Family

ID=40554516

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007225332A Active JP4967930B2 (en) 2007-08-31 2007-08-31 Focus detection device

Country Status (1)

Country Link
JP (1) JP4967930B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022166801A (en) * 2021-04-21 2022-11-02 キヤノン株式会社 Imaging apparatus, control method, and storage medium
US12047681B2 (en) 2021-04-21 2024-07-23 Canon Kabushiki Kaisha Image pickup apparatus including tilt driving portion, control method, and memory medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6370813A (en) * 1986-09-12 1988-03-31 Fuji Photo Film Co Ltd Automatic focusing method
JPH05316401A (en) * 1992-05-13 1993-11-26 Kyocera Corp Automatic focus detector
JPH10224682A (en) * 1997-02-05 1998-08-21 Sony Corp Automatic focusing device
JP2001221633A (en) * 2000-02-09 2001-08-17 Olympus Optical Co Ltd Distance-measuring apparatus
JP2002350712A (en) * 2001-05-23 2002-12-04 Matsushita Electric Ind Co Ltd Automatic focusing device and image pickup device provided with the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6370813A (en) * 1986-09-12 1988-03-31 Fuji Photo Film Co Ltd Automatic focusing method
JPH05316401A (en) * 1992-05-13 1993-11-26 Kyocera Corp Automatic focus detector
JPH10224682A (en) * 1997-02-05 1998-08-21 Sony Corp Automatic focusing device
JP2001221633A (en) * 2000-02-09 2001-08-17 Olympus Optical Co Ltd Distance-measuring apparatus
JP2002350712A (en) * 2001-05-23 2002-12-04 Matsushita Electric Ind Co Ltd Automatic focusing device and image pickup device provided with the same

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022166801A (en) * 2021-04-21 2022-11-02 キヤノン株式会社 Imaging apparatus, control method, and storage medium
JP7293310B2 (en) 2021-04-21 2023-06-19 キヤノン株式会社 IMAGING DEVICE, CONTROL METHOD, AND STORAGE MEDIUM
US12047681B2 (en) 2021-04-21 2024-07-23 Canon Kabushiki Kaisha Image pickup apparatus including tilt driving portion, control method, and memory medium

Also Published As

Publication number Publication date
JP4967930B2 (en) 2012-07-04

Similar Documents

Publication Publication Date Title
JP4886210B2 (en) Imaging device
US9826140B2 (en) Image capturing apparatus and control method thereof
JP4265233B2 (en) camera
JP4647885B2 (en) camera
JP2007108412A (en) Autofocus device and its program
JP2004361484A (en) Autofocus camera
JP4645413B2 (en) Imaging device
JP2007286474A (en) Focus detector and photographing device
JP5092673B2 (en) Imaging apparatus and program thereof
JP2007133301A (en) Autofocus camera
JP5765935B2 (en) Focus adjustment apparatus and method
US20160080636A1 (en) Focusing control device and controlling method of the same
JP4692273B2 (en) Focus detection device and camera
JP2008185823A (en) Focus detector and camera
JP4902946B2 (en) Auto focus camera
JP4967930B2 (en) Focus detection device
JP2007256463A (en) Automatic focusing device and camera
JP2010192991A (en) Imaging apparatus, control method and program
JP2006330394A (en) Autofocus device
JP2006330160A (en) Autofocus camera
JP5320937B2 (en) Focus detection apparatus and imaging apparatus
JP5597942B2 (en) Electronic camera
JP4595390B2 (en) camera
JP2008046556A (en) Camera
JP2006285094A (en) Auto-focus camera and auto-focus device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100910

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110809

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110810

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111011

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20111011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120206

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120306

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120319

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150413

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4967930

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150413

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250