JP2007011054A - Imaging apparatus, control method for imaging apparatus and computer program - Google Patents

Imaging apparatus, control method for imaging apparatus and computer program Download PDF

Info

Publication number
JP2007011054A
JP2007011054A JP2005192564A JP2005192564A JP2007011054A JP 2007011054 A JP2007011054 A JP 2007011054A JP 2005192564 A JP2005192564 A JP 2005192564A JP 2005192564 A JP2005192564 A JP 2005192564A JP 2007011054 A JP2007011054 A JP 2007011054A
Authority
JP
Japan
Prior art keywords
subject
focus
movement
imaging apparatus
focus lens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005192564A
Other languages
Japanese (ja)
Inventor
Shinya Hirai
信也 平井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2005192564A priority Critical patent/JP2007011054A/en
Publication of JP2007011054A publication Critical patent/JP2007011054A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To accurately attain focusing by performing AF once, even when a subject moves between AF regions in the midst of AF. <P>SOLUTION: The imaging apparatus is equipped with a focus lens 2 performing focus adjustment for a subject image; a focus lens driving circuit 16 driving the focus lens 2; an imaging element 3 photoelectrically converting light to form an image via the focus lens 2; an AF evaluated value arithmetic circuit 15 calculating a contrast detection signal, based on an output signal from the imaging element 3 for a plurality of AF regions, while driving the focus lens 2; a subject movement detection part 12 detecting the movement of the subject between the AF regions from the calculated contrast detection signal; and a focusing position determining part 11 obtaining a focusing position, according to the result obtained by detecting the movement of the subject by the subject movement detection part 12. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、電子スチルカメラやビデオカメラ等の撮像装置、撮像装置の制御方法、及びコンピュータプログラムに関し、特に多点AF可能なオートフォーカス機能を有するものに関する。   The present invention relates to an imaging apparatus such as an electronic still camera and a video camera, a control method for the imaging apparatus, and a computer program, and more particularly, to an apparatus having an autofocus function capable of multipoint AF.

デジタルカメラやビデオカメラにおいては、CCDやCMOS等の撮像素子からの出力信号を利用し、被写体のコントラストに応じた信号を検出して合焦させる方法が一般的である。   In a digital camera or a video camera, a method is generally used in which an output signal from an image sensor such as a CCD or CMOS is used to detect and focus a signal corresponding to the contrast of a subject.

しかしながら、上記の方法では、フォーカスレンズを所定範囲にわたってスキャン駆動しながら被写体のコントラストを順次検出する必要があるため、コントラスト検出信号を得るための時間が長くかかってしまう。   However, in the above method, since it is necessary to sequentially detect the contrast of the subject while the focus lens is scan-driven over a predetermined range, it takes a long time to obtain a contrast detection signal.

特に、動きのある被写体に対してAFする場合、AF中に被写体が変化してしまうため、正確に合焦させることは難しかった。   In particular, when AF is performed on a moving subject, the subject changes during the AF, so it is difficult to focus accurately.

被写体に動きがある場合に対応するものとして、例えば特許文献1にあるように、撮像装置と別にAF用センサを持ち、複数のAF領域において繰り返し同一シーンをAFして、複数のAF領域でのAF結果の変化を見ることで被写体の移動を検知する方法が知られている。   For example, as disclosed in Patent Document 1, an AF sensor is provided separately from the imaging device, and AF is repeatedly performed on the same scene in a plurality of AF areas. There is known a method for detecting movement of a subject by observing a change in an AF result.

特許第2686119号公報Japanese Patent No. 2686119

しかしながら、特許文献1に開示された方法では、撮像装置と別にAF用センサを持つ必要があるため、コストがかかってしまう。   However, in the method disclosed in Patent Document 1, since it is necessary to have an AF sensor separately from the imaging device, costs increase.

また、撮像素子からの出力信号を用いて、複数のAF領域において繰り返し同一シーンをAFして、複数のAF領域でのAF結果の変化を見る方法を行う場合には、AFの繰り返しにより非常に時間がかかってしまう。また、一回のAFそのものに時間がかかるため、AF中に被写体の移動があった場合のAF結果の信頼性が低くなってしまう。   In addition, when the same scene is repeatedly performed in a plurality of AF areas using the output signal from the image sensor and the change in the AF result is observed in the plurality of AF areas, the AF is repeated. It takes time. In addition, since it takes time for one AF itself, the reliability of the AF result when the subject moves during AF becomes low.

本発明は上記のような点に鑑みてされたものであり、AF中にAF領域間で被写体の移動があった場合でも、一回のAFで精度良く合焦可能とすることを目的とする。   The present invention has been made in view of the above points, and an object of the present invention is to enable accurate focusing with one AF even when a subject moves between AF areas during AF. .

本発明の撮像装置は、被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置であって、前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する演算手段と、前記演算手段により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する被写体移動検知手段と、前記被写体移動検知手段による被写体移動の検知結果に応じて合焦位置を求める合焦位置決定手段とを備えた点に特徴を有する。
本発明の撮像装置の制御方法は、被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置の制御方法であって、演算手段が、前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する手順と、被写体移動検知手段が、前記演算手段により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する手順と、合焦位置決定手段が、前記被写体移動検知手段による被写体移動の検知結果に応じて合焦位置を求める手順とを有する点に特徴を有する。
本発明のコンピュータプログラムは、被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置を制御するためのコンピュータプログラムであって、前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する演算処理と、前記演算処理により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する被写体移動検知処理と、前記被写体移動検知処理による被写体移動の検知結果に応じて合焦位置を求める合焦位置決定処理とをコンピュータに実行させる点に特徴を有する。
An imaging apparatus of the present invention includes a focus lens that adjusts the focus of a subject image, a focus lens driving unit that drives the focus lens, and an imaging element that photoelectrically converts light imaged through the focus lens. An image pickup apparatus, wherein the focus lens is driven while calculating means for calculating a contrast detection signal based on an output signal from an image pickup device for a plurality of AF areas, and an AF area from the contrast detection signal calculated by the calculation means It is characterized in that it includes a subject movement detection means for detecting the movement of the subject between and a focus position determination means for obtaining a focus position in accordance with the detection result of the subject movement by the subject movement detection means.
An imaging apparatus control method according to the present invention includes a focus lens that adjusts the focus of a subject image, a focus lens driving unit that drives the focus lens, an image sensor that photoelectrically converts light imaged through the focus lens, A method for calculating a contrast detection signal based on output signals from an image sensor for a plurality of AF areas while driving the focus lens, and a subject movement detection unit The procedure for detecting subject movement between AF areas from the contrast detection signal computed by the computing means, and the focus position determining means according to the detection result of the subject movement by the subject movement detection means And a procedure for obtaining.
A computer program according to the present invention includes a focus lens that adjusts the focus of a subject image, a focus lens driving unit that drives the focus lens, and an image sensor that photoelectrically converts light imaged through the focus lens. A computer program for controlling an image pickup apparatus, wherein the focus detection lens is driven by a calculation process for calculating a contrast detection signal based on an output signal from an image pickup device while driving the focus lens, and the calculation process. Subject movement detection processing for detecting subject movement between AF areas from the detected contrast detection signal, and in-focus position determination processing for obtaining a focus position according to the detection result of subject movement by the subject movement detection processing It is characterized in that

本発明によれば、AF中にAF領域間で被写体の移動があった場合でも、一回のAFで精度良く合焦可能とすることができる。   According to the present invention, even when there is a movement of a subject between AF areas during AF, it is possible to focus accurately with a single AF.

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
(第1の実施例)
図1は、本発明を適用した実施形態のデジタルカメラの概略構成を示す図である。デジタルカメラは、光学系1及び被写体像の焦点調節を行うフォーカスレンズ2を備え、これらにより結像した光を撮像素子3により光電変換する。
Preferred embodiments of the present invention will be described below with reference to the accompanying drawings.
(First embodiment)
FIG. 1 is a diagram showing a schematic configuration of a digital camera according to an embodiment to which the present invention is applied. The digital camera includes an optical system 1 and a focus lens 2 that adjusts the focus of a subject image, and photoelectrically converts light imaged by these using an imaging device 3.

撮像素子3により光電変換した信号を、出力ノイズを除去するCDS回路やA/D変換前に行う非線形増幅回路を備えた前置処理回路4で前処理し、A/D変換器5でデジタル化した後、メモリコントローラ6を介してメモリ7に格納し、図示しない信号処理回路によって画像データに変換してから記録媒体8に記録する。   The signal photoelectrically converted by the image sensor 3 is pre-processed by a pre-processing circuit 4 having a CDS circuit for removing output noise and a non-linear amplification circuit to be performed before A / D conversion, and digitized by an A / D converter 5 After that, it is stored in the memory 7 via the memory controller 6, converted into image data by a signal processing circuit (not shown), and then recorded on the recording medium 8.

オートフォーカス(AF)動作は、制御部17により制御される。走査位置/範囲設定部14により設定した領域についてフォーカスレンズ駆動回路16によりフォーカスレンズ2を駆動し、各フォーカスレンズ位置において撮像素子3からの出力信号に基づいて、AF評価値として画像のコントラストに応じた信号(コントラスト検出信号)をAF評価値演算回路15で演算する。AF評価値演算回路15での演算は、AF枠設定部13により設定した複数のAF枠(AF領域)について行われる。   The autofocus (AF) operation is controlled by the control unit 17. The focus lens drive circuit 16 drives the focus lens 2 for the region set by the scanning position / range setting unit 14 and, according to the contrast of the image as an AF evaluation value, based on the output signal from the image sensor 3 at each focus lens position. The signal (contrast detection signal) is calculated by the AF evaluation value calculation circuit 15. The calculation in the AF evaluation value calculation circuit 15 is performed for a plurality of AF frames (AF areas) set by the AF frame setting unit 13.

次に、被写体移動検知部12により後述する方法により被写体の移動を検知し、その検知結果に応じて合焦位置決定部11により合焦位置を求めた後、その位置にフォーカスレンズを駆動するよう動作する。   Next, the subject movement detection unit 12 detects the movement of the subject by a method to be described later, and after the focus position determination unit 11 obtains the focus position according to the detection result, the focus lens is driven to that position. Operate.

なお、シャッタースイッチ1(SW1)9が操作されたときにフォーカス動作を行い、シャッタースイッチ2(SW2)10が操作されたときに撮像動作及び画像データの記録動作を行う。   A focus operation is performed when the shutter switch 1 (SW1) 9 is operated, and an imaging operation and an image data recording operation are performed when the shutter switch 2 (SW2) 10 is operated.

コントラスト検出信号(以下、「AF評価値(AF評価信号)」と称する)の演算は次のように行う。AF枠内の画像データの各ラインに水平方向のバンドパスフィルタを適用する。次に、ライン毎にバンドパス出力信号の絶対値の最も大きいものを選択し、その選択した信号を垂直方向に積分する。水平方向に対してはコントラストの大きいものが選択され、垂直方向に対しては信号のS/Nの向上につながる。以上のように構成することで、合焦状態でもっとも値が大きくなり、デフォーカス状態にすると値が小さくなるような信号を得ることが可能である。   The calculation of the contrast detection signal (hereinafter referred to as “AF evaluation value (AF evaluation signal)”) is performed as follows. A horizontal bandpass filter is applied to each line of image data in the AF frame. Next, the bandpass output signal having the largest absolute value is selected for each line, and the selected signal is integrated in the vertical direction. A signal having a high contrast is selected in the horizontal direction, and the signal S / N is improved in the vertical direction. With the configuration as described above, it is possible to obtain a signal that has the largest value in the in-focus state and decreases in the defocus state.

次に、被写体の移動を検知して、検知結果を利用して合焦位置を求める手法について詳細に説明する。以下、図2に示すように、撮像画面内に3つのAF枠(測距枠)を持つ場合を例にして説明する。   Next, a method for detecting the movement of the subject and obtaining the in-focus position using the detection result will be described in detail. Hereinafter, as shown in FIG. 2, a case where there are three AF frames (ranging frames) in the imaging screen will be described as an example.

AF中に被写体がB枠からC枠に移動した場合、AF評価値としては図3に示すようなものとなる。図3において、A枠では、位置(被写体距離)によらずコントラストが低くなっており、コントラストのある被写体が存在していないことを示している。また、B枠、C枠では、位置xにおいてB枠からC枠のAF評価値が急激に変化しており、この位置で被写体が移動したことを示している。このようなAF評価値が得られた場合、各枠ごとに正確な合焦位置を求めるのは通常は困難である。   When the subject moves from the B frame to the C frame during AF, the AF evaluation value is as shown in FIG. In FIG. 3, the A frame shows that the contrast is low regardless of the position (subject distance), indicating that there is no subject with contrast. Further, in the B frame and the C frame, the AF evaluation value of the C frame from the B frame is abruptly changed at the position x, indicating that the subject has moved at this position. When such an AF evaluation value is obtained, it is usually difficult to obtain an accurate in-focus position for each frame.

本実施形態では、このような場合でも、AF枠間での被写体の移動を検知して補正することにより正確な合焦位置を求める。以下、図4に示すフローチャートを参照して、合焦位置を求めるまでの処理動作について説明する。まず、検出対象のAF枠を設定する(ステップS1)。   In this embodiment, even in such a case, an accurate in-focus position is obtained by detecting and correcting the movement of the subject between the AF frames. Hereinafter, with reference to the flowchart shown in FIG. 4, the processing operation until the in-focus position is obtained will be described. First, an AF frame to be detected is set (step S1).

次に、AF評価値の変動が予め定められた所定値以上の部分があるかどうかを判定する(ステップS2)。例えば図5に示すように、位置XiでのAF評価値をYiとすると、隣接するAF評価値の差の絶対値Zi=|Yi-1−Yi|を計算し、下式(1)
i+1>(Zi×α)・・・(1)
を満たす位置Xi+1が存在するかどうかを調べる。ただし、αは予め設定した正の値である。
Next, it is determined whether or not there is a portion where the variation of the AF evaluation value is equal to or greater than a predetermined value (step S2). For example, as shown in FIG. 5, if the AF evaluation value at the position X i is Y i , the absolute value Z i = | Y i−1 −Y i | (1)
Z i + 1 > (Z i × α) (1)
It is checked whether or not there exists a position X i + 1 that satisfies. Here, α is a positive value set in advance.

上式(1)は、AF評価値の変動が直前の変動と比較して大きいかどうかを判断するための式であり、αの値を適宜変更することで、判定する変動の程度を変更することが可能である。   The above expression (1) is an expression for determining whether or not the variation of the AF evaluation value is larger than the immediately preceding variation, and the degree of variation to be determined is changed by appropriately changing the value of α. It is possible.

ステップS2において上式(1)を満たす位置Xi+1が存在する場合には、その位置Xi+1及び変動量を記憶し(ステップS3)、このAF枠をAF評価値の変動のあった枠として設定する(ステップS4)。 If the position X i + 1 satisfying the above equation (1) is present in step S2, stores the position X i + 1 and the variation amount (step S3), and there the AF frame of the variation of the AF evaluation value Set as a frame (step S4).

それに対して、ステップS2において上式(1)を満たす位置Xi+1が存在しない場合には、このAF枠をAF評価値の変動のなかった枠として設定する(ステップS7)。 On the other hand, if there is no position X i + 1 that satisfies the above equation (1) in step S2, this AF frame is set as a frame in which the AF evaluation value has not changed (step S7).

次に、全AF枠について上記動作を行ったかどうかを調べ、まだ残っていたならば、ステップS6に進み、AF枠を変更して上記動作を繰り返す。例えばA枠から始まり、B枠、C枠についてステップS2〜4、7の動作を繰り返す。全AF枠について終了していれば、ステップS8に進む。   Next, it is checked whether or not the above operation has been performed for all the AF frames. If the operation remains, the process proceeds to step S6, the AF frame is changed, and the above operation is repeated. For example, starting from the A frame, the operations in steps S2 to S4 and S7 are repeated for the B frame and the C frame. If all AF frames have been completed, the process proceeds to step S8.

ステップS8では、AF評価値の変動のあった枠が隣接しているかどうかを調べる。例えばA枠とB枠、B枠とC枠は隣接しているとみなされる。そして、隣接している場合に、それらAF枠の変動位置Xi+1が一致しているかどうかを調べ、一致していればその2枠の組み合わせを被写体が移動した枠の候補として決定する。なお、各AF枠間に隙間を設けている場合には必ずしも変動位置は一致しないので、ある程度の幅を持たせておき、略一致するとみなせる場合に被写体が移動した枠の候補として決定すればよい。 In step S8, it is checked whether or not the frames where the AF evaluation value fluctuates are adjacent. For example, the A frame and the B frame, and the B frame and the C frame are considered to be adjacent to each other. If they are adjacent to each other, it is checked whether or not the AF frame variation positions X i + 1 match. If they match, the combination of the two frames is determined as a frame candidate to which the subject has moved. Note that when the gaps are provided between the AF frames, the fluctuating positions do not necessarily match. Therefore, a certain amount of width may be given, and if it can be considered that they substantially match, it may be determined as a frame candidate to which the subject has moved. .

続いて、被写体が移動した候補の枠同士で、変動位置Xi+1を境にAF評価値を入れ替えて、その連続性を判定する(ステップS9)。例えば図3に示すような場合に、B枠とC枠のAF評価値を位置xを境に入れ替えると図6に示すようになる。図6に示す例では連続的につながっているが、必ずしも連続的につながるとは限らないため、その連続性を検出するようにする。すなわち、入れ替え後のAF評価値について、ステップS2と同じ動作により入れ替え部分のAF評価値の変動が所定値以上あるかどうかを調べる。変動があると判定された場合にはAF評価値の入れ替えの結果、連続性がないと判定され、変動がないと判定された場合には連続性があると判定される。 Subsequently, the AF evaluation values are interchanged between the candidate frames to which the subject has moved, with the change position X i + 1 as a boundary, and the continuity is determined (step S9). For example, in the case shown in FIG. 3, when the AF evaluation values of the B frame and the C frame are switched at the position x, the result is as shown in FIG. In the example shown in FIG. 6, the connection is continuous, but the connection is not always continuous, so the continuity is detected. That is, with respect to the AF evaluation value after replacement, it is checked whether or not the variation of the AF evaluation value in the replacement portion is greater than or equal to a predetermined value by the same operation as step S2. When it is determined that there is a change, it is determined that there is no continuity as a result of the replacement of the AF evaluation value, and when it is determined that there is no change, it is determined that there is continuity.

連続性を判定する際、移動前後のAF枠でAF評価値の変動の方向が逆になるため、変動の符号、すなわち、Yi−Yi+1の符号がB枠とC枠で逆になっているかどうかを調べ、逆になっていれば枠移動したと判定する条件を加えても良い。 When determining the continuity, the direction of the fluctuation of the AF evaluation value is reversed between the AF frames before and after the movement. Therefore, the sign of the fluctuation, that is, the sign of Y i −Y i + 1 is reversed between the B frame and the C frame. A condition for determining that the frame has been moved may be added.

そして、入れ替えの結果、AF評価値の連続性があると判定されたAF枠、及び、ステップS7において設定されたAF評価値の変動のなかった枠について、それぞれAF評価値が極大となる位置を求め、その中から最適な位置を選択して合焦位置を求める(ステップS10)。合焦位置の選択は、例えば複数のAF枠の極大となる位置の中から最も近い位置のものを選択するようにしてもよいし、各AF枠の極大の位置の平均位置としても良いし、また、AF評価値の極大値のうち最も大きいもの極大の位置にしてもよい。   Then, as a result of the replacement, the position where the AF evaluation value is maximized is determined for each of the AF frame determined to have continuity of the AF evaluation value and the frame where the AF evaluation value set in step S7 has not changed. Then, an optimum position is selected from them, and the in-focus position is obtained (step S10). The in-focus position may be selected, for example, by selecting the closest position from the maximum positions of a plurality of AF frames, or may be the average position of the maximum positions of each AF frame, Alternatively, the position of the maximum value among the maximum values of the AF evaluation values may be set.

以上の動作により、被写体がAF中にAF枠間を移動した場合でも、被写体の移動を検知して、AF評価値を補正することができ、正しく合焦位置を求めることが可能となる。   With the above operation, even when the subject moves between AF frames during AF, the movement of the subject can be detected, the AF evaluation value can be corrected, and the correct in-focus position can be obtained.

なお、以上の説明では被写体のAF枠間の移動が一箇所の場合で説明したが、複数箇所ある場合でも、それぞれの個所で同様の処理を行うことで対応することが可能である。   In the above description, the movement of the subject between the AF frames is described as one place. However, even when there are a plurality of places, the same processing can be performed at each place.

また、AF評価値の変動や被写体の移動を検出する手法は本実施形態に述べたものに限定されるものではなく、他の手法によっても良い。   Further, the method for detecting the AF evaluation value fluctuation and the movement of the subject is not limited to those described in the present embodiment, and other methods may be used.

また、AF評価値の変動や被写体の移動を検知した場合に、そのことを警告する表示を表示装置に行ったり、自動的にフォーカス動作をやり直したりするように構成しても良い。   In addition, when a change in AF evaluation value or movement of a subject is detected, a display that warns about this may be displayed on the display device, or the focus operation may be automatically restarted.

また、被写体自体が移動する場合以外にも、カメラが動いたり、画角が変化したりすることにより相対的に被写体移動がある場合でも、同様の処理動作を行うことにより、同等の効果が得られる。   In addition to the case where the subject itself moves, even if the subject moves relatively due to the movement of the camera or the angle of view, the same effect can be obtained by performing the same processing operation. It is done.

(第2の実施形態)
第2の実施形態では、上記第1の実施形態のように、被写体が移動したAF枠についてのAF評価値の補正を行わず、被写体の移動の有無に応じて合焦位置を求める動作を変更することにより、合焦位置の信頼性を向上させる例について説明する。
(Second Embodiment)
In the second embodiment, as in the first embodiment, the operation for obtaining the in-focus position is changed according to whether or not the subject has moved without correcting the AF evaluation value for the AF frame to which the subject has moved. By doing so, an example of improving the reliability of the in-focus position will be described.

図7に示すフローチャートを参照して、被写体の移動の有無の情報を用いて合焦位置を求める処理動作について説明する。まず、被写体の移動の有無を検知する(ステップS11)。被写体の移動の有無の判定手法については、第1の実施形態で説明したのと同様であり、詳細は省略する。   With reference to the flowchart shown in FIG. 7, the processing operation for obtaining the in-focus position using information on whether or not the subject has moved will be described. First, the presence / absence of movement of the subject is detected (step S11). The method for determining whether or not the subject has moved is the same as that described in the first embodiment, and details thereof are omitted.

被写体の移動がない場合(ステップS12)、取得したAF評価値全部を用いて極大となる位置を求める(ステップS14)。   When there is no movement of the subject (step S12), a position where the maximum is obtained is obtained using all the acquired AF evaluation values (step S14).

それに対して、被写体の移動があった場合(ステップS12)、その前後でAF評価値を分け、それぞれについて極大となる位置を求める(ステップS13)。例えば図3のB枠の場合で説明すると、位置xより前のAF評価値と位置xより後のAF評価値とを分離し、それぞれについて極大となる位置を求める。位置xより前の部分については極大となる位置が存在せず、位置xより後の部分については極大となる位置が存在している。したがって、位置xより後の部分の極大の位置のみが採用されることになる。   On the other hand, when the subject has moved (step S12), the AF evaluation values are divided before and after that, and the maximum position is obtained for each (step S13). For example, in the case of the B frame in FIG. 3, the AF evaluation value before the position x and the AF evaluation value after the position x are separated, and a local maximum position is obtained for each. There is no maximal position for the part before the position x, and there is a maximal position for the part after the position x. Accordingly, only the local maximum position after the position x is adopted.

以上の処理動作を全てのAF枠について行い(ステップS15)、極大値が求められたAF枠の中から最適な合焦位置を求める(ステップS16)。例えば最も至近のものを選択し、合焦位置とする。至近のものを選択するようにすることで、人が2人離れて立っているようなシーンで背景にピントがあってしまい、手前の被写体がボケるような中抜けを避けることが可能である。   The above processing operation is performed for all AF frames (step S15), and an optimum in-focus position is obtained from the AF frames for which the maximum value has been obtained (step S16). For example, the closest one is selected and set as the in-focus position. By selecting the closest one, it is possible to avoid a void where the background is in focus and the subject in front is blurred in a scene where two people are standing apart. .

なお、以上の説明では被写体の移動のあったAF枠について移動位置の前後を分けてそれぞれの極大を求めるようにしたが、被写体の移動のあったAF枠を用いないようにし、移動のなかったAF枠から合焦位置を求めるようにしても良い。   In the above description, the AF frame in which the subject has moved is divided into the front and rear of the movement position, and the respective local maximums are obtained. However, the AF frame in which the subject has moved is not used, and there is no movement. The in-focus position may be obtained from the AF frame.

(第3の実施形態)
第3の実施形態では、AF領域を増加した場合の例について説明する。本実施形態では、図8に示すように表示装置に表示するAF枠(a)と実際のAF枠(b)を変更して利用する。すなわち、ユーザから見るとオートフォーカスのAF領域は1点のみであるように動作するが、実際には9点のAF領域でAFしており、被写体の移動を検知した場合、中央AF領域以外のAF領域の情報も利用して精度の高い合焦位置を得るのが目的である。
(Third embodiment)
In the third embodiment, an example in which the AF area is increased will be described. In this embodiment, as shown in FIG. 8, the AF frame (a) displayed on the display device and the actual AF frame (b) are changed and used. In other words, when viewed from the user, the auto-focus AF area operates so that there is only one point, but in actuality, AF is performed in the nine-point AF area. The purpose is to obtain an in-focus position with high accuracy using the information of the AF area.

具体的には、図9に示すフローチャートに従って合焦位置を求める。まず、図8(b)に示すように9点のAF枠でのAF動作を行う(ステップS17)。   Specifically, the in-focus position is obtained according to the flowchart shown in FIG. First, as shown in FIG. 8B, an AF operation is performed with nine AF frames (step S17).

次に、第1の実施形態で説明した被写体の移動を検知する手法により被写体の移動を検知する(ステップS18)。   Next, the movement of the subject is detected by the method for detecting the movement of the subject described in the first embodiment (step S18).

そして、C枠からA枠に被写体が移動したかどうかを判定し(ステップS19)、C枠からA枠に移動したと検知された場合には、ステップS20に進み、第1の実施形態で説明した手法によりAF評価値の補正を行い、合焦位置を求める。それに対して、C枠からA枠に移動したと検知されなかった場合には、ステップS21に進み、C枠のみを用いて合焦位置を検知する。   Then, it is determined whether or not the subject has moved from the C frame to the A frame (step S19). If it is detected that the subject has moved from the C frame to the A frame, the process proceeds to step S20, which will be described in the first embodiment. The AF evaluation value is corrected by the method described above to obtain the in-focus position. On the other hand, if it is not detected that the frame has moved from the C frame to the A frame, the process proceeds to step S21 to detect the in-focus position using only the C frame.

以上のように構成することで、ユーザは1点でAFをしているつもりのため、中央のAF領域を自分が合わせたい被写体に向けてカメラの向きを調整するが、その被写体がAF中に移動した場合でも、周辺のAF結果を利用して合焦位置を求めることができ、合焦位置の信頼性が向上する。   By configuring as described above, the user intends to perform AF at one point, so the center AF area is adjusted to the subject that he / she wants to adjust, and the direction of the camera is adjusted. Even in the case of movement, the in-focus position can be obtained using the surrounding AF results, and the reliability of the in-focus position is improved.

なお、表示するAF枠を1点の場合で説明したが、図10に示すように複数のAF枠を表示しておき、実際にはさらに多くのAF枠を用いるように構成しても良い。   In the above description, only one AF frame is displayed. However, a plurality of AF frames may be displayed as shown in FIG. 10, and more AF frames may be actually used.

なお、本発明の目的は、上述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。   An object of the present invention is to supply a storage medium storing software program codes for realizing the functions of the above-described embodiments to a system or apparatus, and the computer (or CPU or MPU) of the system or apparatus stores the storage medium. Needless to say, this can also be achieved by reading and executing the program code stored in.

この場合、記憶媒体から読み出されたプログラムコード自体が上述した実施形態の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。   In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the program code itself and the storage medium storing the program code constitute the present invention.

プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。   As a storage medium for supplying the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, a ROM, or the like can be used.

また、コンピュータが読み出したプログラムコードを実行することにより、上述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(基本システム或いはオペレーティングシステム)等が実際の処理の一部又は全部を行い、その処理によって上述した実施形態の機能が実現される場合も含まれることは言うまでもない。   Further, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (basic system or operating system) running on the computer based on the instruction of the program code. Needless to say, a case where the functions of the above-described embodiment are realized by performing part or all of the actual processing and the processing is included.

さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部又は全部を行い、その処理によって上述した実施形態の機能が実現される場合も含まれることは言うまでもない。   Further, after the program code read from the storage medium is written to a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that the CPU or the like provided in the board or function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.

デジタルカメラの概略構成を示す図である。It is a figure which shows schematic structure of a digital camera. 複数のAF枠の例を示す図である。It is a figure which shows the example of a some AF frame. 被写体が移動した場合の各枠でAF評価信号の例を示す図である。It is a figure which shows the example of AF evaluation signal in each frame when a to-be-photographed object moves. 第1の実施形態における合焦位置を求めるまでの処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating the processing operation | movement until it calculates | requires the focus position in 1st Embodiment. 被写体距離とAF評価信号との関係を示す図である。It is a figure which shows the relationship between a to-be-photographed object distance and AF evaluation signal. 補正後のAF評価信号を示す図である。It is a figure which shows AF evaluation signal after correction | amendment. 第2の実施形態における合焦位置を求めるまでの処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating the processing operation | movement until it calculates | requires the focus position in 2nd Embodiment. 第3の実施形態におけるAF枠の例を示す図である。It is a figure which shows the example of the AF frame in 3rd Embodiment. 第3の実施例における合焦位置を求めるまでの処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating the processing operation | movement until it calculates | requires the focus position in a 3rd Example. 第3の実施形態におけるAF枠の他の例を示す図である。It is a figure which shows the other example of AF frame in 3rd Embodiment.

符号の説明Explanation of symbols

1 光学系
2 フォーカスレンズ
3 撮像素子
4 前置処理回路
5 A/D変換器
6 メモリコントローラ
7 メモリ
8 記録媒体
9 SW1スイッチ
10 SW2スイッチ
11 合焦位置決定部
12 被写体移動検知部
13 AF枠設定部
14 走査位置/範囲設定部
15 AF評価値演算回路
16 フォーカスレンズ駆動回路
17 制御部
DESCRIPTION OF SYMBOLS 1 Optical system 2 Focus lens 3 Image pick-up element 4 Pre-processing circuit 5 A / D converter 6 Memory controller 7 Memory 8 Recording medium 9 SW1 switch 10 SW2 switch 11 Focus position determination part 12 Subject movement detection part 13 AF frame setting part 14 Scanning Position / Range Setting Unit 15 AF Evaluation Value Calculation Circuit 16 Focus Lens Drive Circuit 17 Control Unit

Claims (15)

被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置であって、
前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する演算手段と、
前記演算手段により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する被写体移動検知手段と、
前記被写体移動検知手段による被写体移動の検知結果に応じて合焦位置を求める合焦位置決定手段とを備えたことを特徴とする撮像装置。
An imaging apparatus comprising: a focus lens that performs focus adjustment of a subject image; a focus lens driving unit that drives the focus lens; and an image sensor that photoelectrically converts light imaged through the focus lens;
An arithmetic means for calculating a contrast detection signal based on an output signal from the image sensor for a plurality of AF areas while driving the focus lens;
Subject movement detection means for detecting subject movement between AF areas from the contrast detection signal calculated by the calculation means;
An imaging apparatus comprising: an in-focus position determining unit that obtains an in-focus position according to a detection result of the object movement by the object movement detecting unit.
前記合焦位置決定手段は、被写体移動のあるAF領域でのコントラスト検出信号を補正し、その補正後のコントラスト検出信号を用いて合焦位置を求めることを特徴とする請求項1に記載の撮像装置。   2. The imaging according to claim 1, wherein the in-focus position determination unit corrects a contrast detection signal in an AF area where the subject moves, and obtains the in-focus position using the corrected contrast detection signal. apparatus. 前記合焦位置決定手段は、被写体移動に関係するAF領域間でコントラスト検出信号の一部を入れ替えることで補正を行うことを特徴とする請求項2に記載の撮像装置。   The imaging apparatus according to claim 2, wherein the in-focus position determination unit performs correction by exchanging a part of the contrast detection signal between AF areas related to subject movement. 前記合焦位置決定手段は、被写体移動の有無に応じて合焦位置を求めることを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the in-focus position determining unit obtains an in-focus position according to whether or not the subject has moved. 前記合焦位置決定手段は、被写体移動のないAF領域でのコントラスト検出信号のみを用いて合焦位置を求めることを特徴とする請求項4に記載の撮像装置。   The imaging apparatus according to claim 4, wherein the in-focus position determining unit obtains an in-focus position using only a contrast detection signal in an AF area where there is no subject movement. 前記合焦位置決定手段は、被写体移動のあるAF領域での被写体移動の前後でコントラスト検出信号を分けて、それぞれ独立に合焦位置を求めることを特徴とする請求項4に記載の撮像装置。   The imaging apparatus according to claim 4, wherein the focus position determination unit divides the contrast detection signal before and after the movement of the subject in the AF area where the subject moves, and independently obtains the focus position. 前記被写体移動検知手段は、コントラスト検出信号の変動量の大きい個所を検出することを特徴とする請求項1〜6のいずれか1項に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the subject movement detection unit detects a portion where a variation amount of a contrast detection signal is large. 前記被写体移動検知手段は、前記コントラスト検出信号の変動量の大きい箇所が、隣接するAF領域で一致するかどうかを判定することを特徴とする請求項7に記載の撮像装置。   The imaging apparatus according to claim 7, wherein the subject movement detection unit determines whether or not a portion where the variation amount of the contrast detection signal is large matches in an adjacent AF area. 前記被写体移動検知手段は、前記コントラスト検出信号の変動量の大きい箇所が、隣接するAF領域で一致する場合、その箇所で各AF領域のコントラスト検出信号を入れ替えて、その連続性を判定することを特徴とする請求項8に記載の撮像装置。   When the location where the variation amount of the contrast detection signal is large matches in an adjacent AF area, the subject movement detection means replaces the contrast detection signal of each AF area at that location and determines its continuity. The imaging apparatus according to claim 8, wherein the imaging apparatus is characterized. 前記複数のAF領域の一部を、前記被写体移動検知手段により他のAF領域からの被写体移動を検知した場合にのみ利用することを特徴とする請求項1〜9のいずれか1項に記載の撮像装置。   10. The apparatus according to claim 1, wherein a part of the plurality of AF areas is used only when a subject movement from another AF area is detected by the subject movement detection unit. Imaging device. 前記他のAF領域からの被写体移動を検知した場合にのみ利用するAF領域については、AF領域の位置或いは領域を表示装置に表示しないことを特徴とする請求項10に記載の撮像装置。   The imaging apparatus according to claim 10, wherein the position or area of the AF area is not displayed on the display apparatus for the AF area used only when the movement of the subject from the other AF area is detected. 前記被写体移動検知手段により被写体移動を検知した場合に、そのことを表示装置に表示することを特徴とする請求項1〜11のいずれか1項に記載の撮像装置。   The imaging apparatus according to claim 1, wherein when an object movement is detected by the object movement detection unit, this is displayed on a display device. 前記被写体移動検知手段により被写体移動を検知した場合に、フォーカス動作を再実行することを特徴とする請求項1〜12のいずれか1項に記載の撮像装置。   The imaging apparatus according to claim 1, wherein when the subject movement is detected by the subject movement detection unit, the focus operation is re-executed. 被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置の制御方法であって、
演算手段が、前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する手順と、
被写体移動検知手段が、前記演算手段により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する手順と、
合焦位置決定手段が、前記被写体移動検知手段による被写体移動の検知結果に応じて合焦位置を求める手順とを有することを特徴とする撮像装置の制御方法。
A control method for an imaging apparatus, comprising: a focus lens that adjusts the focus of a subject image; a focus lens driving unit that drives the focus lens; and an image sensor that photoelectrically converts light imaged through the focus lens. And
A calculation means for calculating a contrast detection signal based on an output signal from an image sensor for a plurality of AF areas while driving the focus lens;
A procedure in which subject movement detection means detects subject movement between AF regions from the contrast detection signal calculated by the calculation means;
A method for controlling an imaging apparatus, comprising: a focusing position determination unit that obtains a focusing position in accordance with a detection result of subject movement by the subject movement detection unit.
被写体像の焦点調節を行うフォーカスレンズと、前記フォーカスレンズを駆動するフォーカスレンズ駆動手段と、前記フォーカスレンズを介して結像した光を光電変換する撮像素子とを備えた撮像装置を制御するためのコンピュータプログラムであって、
前記フォーカスレンズを駆動させながら、複数のAF領域について撮像素子からの出力信号に基づきコントラスト検出信号を演算する演算処理と、
前記演算処理により演算されたコントラスト検出信号からAF領域間での被写体移動を検知する被写体移動検知処理と、
前記被写体移動検知処理による被写体移動の検知結果に応じて合焦位置を求める合焦位置決定処理とをコンピュータに実行させることを特徴とするコンピュータプログラム。
Controlling an imaging apparatus comprising: a focus lens that adjusts the focus of a subject image; a focus lens driving unit that drives the focus lens; and an image sensor that photoelectrically converts light imaged through the focus lens A computer program,
An arithmetic process for calculating a contrast detection signal based on an output signal from the image sensor for a plurality of AF areas while driving the focus lens;
Subject movement detection processing for detecting subject movement between AF areas from the contrast detection signal computed by the computation processing;
A computer program that causes a computer to execute an in-focus position determination process for obtaining an in-focus position according to a detection result of an object movement by the object movement detection process.
JP2005192564A 2005-06-30 2005-06-30 Imaging apparatus, control method for imaging apparatus and computer program Pending JP2007011054A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005192564A JP2007011054A (en) 2005-06-30 2005-06-30 Imaging apparatus, control method for imaging apparatus and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005192564A JP2007011054A (en) 2005-06-30 2005-06-30 Imaging apparatus, control method for imaging apparatus and computer program

Publications (1)

Publication Number Publication Date
JP2007011054A true JP2007011054A (en) 2007-01-18

Family

ID=37749645

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005192564A Pending JP2007011054A (en) 2005-06-30 2005-06-30 Imaging apparatus, control method for imaging apparatus and computer program

Country Status (1)

Country Link
JP (1) JP2007011054A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009037067A (en) * 2007-08-02 2009-02-19 Canon Inc Imaging apparatus, and its control method
US8200081B2 (en) 2007-08-02 2012-06-12 Canon Kabushiki Kaisha Image capturing apparatus and method for controlling same
US9317748B2 (en) 2012-10-15 2016-04-19 Olympus Corporation Tracking apparatus
US10623625B2 (en) 2015-12-22 2020-04-14 Fujifilm Corporation Focusing control device, imaging device, focusing control method, and nontransitory computer readable medium
EP3723358A1 (en) * 2019-04-10 2020-10-14 Canon Kabushiki Kaisha Image processing apparatus, control method thereof, and program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6471382A (en) * 1987-09-11 1989-03-16 Canon Kk Automatic focusing device
JPH01288816A (en) * 1988-05-16 1989-11-21 Canon Inc Automatic focus adjustor
JPH02116810A (en) * 1988-10-27 1990-05-01 Canon Inc Distance measurement region setting device
JPH042281A (en) * 1990-04-19 1992-01-07 Mitsubishi Electric Corp Automatic focusing device
JPH09159904A (en) * 1995-12-07 1997-06-20 Nikon Corp Automatic focusing device
JPH11142725A (en) * 1997-11-13 1999-05-28 Casio Comput Co Ltd Camera apparatus and autofocusing control method
JP2004264827A (en) * 2003-02-10 2004-09-24 Chinon Ind Inc Method for detecting focal distance and focusing device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6471382A (en) * 1987-09-11 1989-03-16 Canon Kk Automatic focusing device
JPH01288816A (en) * 1988-05-16 1989-11-21 Canon Inc Automatic focus adjustor
JPH02116810A (en) * 1988-10-27 1990-05-01 Canon Inc Distance measurement region setting device
JPH042281A (en) * 1990-04-19 1992-01-07 Mitsubishi Electric Corp Automatic focusing device
JPH09159904A (en) * 1995-12-07 1997-06-20 Nikon Corp Automatic focusing device
JPH11142725A (en) * 1997-11-13 1999-05-28 Casio Comput Co Ltd Camera apparatus and autofocusing control method
JP2004264827A (en) * 2003-02-10 2004-09-24 Chinon Ind Inc Method for detecting focal distance and focusing device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009037067A (en) * 2007-08-02 2009-02-19 Canon Inc Imaging apparatus, and its control method
US8200081B2 (en) 2007-08-02 2012-06-12 Canon Kabushiki Kaisha Image capturing apparatus and method for controlling same
US9317748B2 (en) 2012-10-15 2016-04-19 Olympus Corporation Tracking apparatus
US9761010B2 (en) 2012-10-15 2017-09-12 Olympus Corporation Tracking apparatus
US10623625B2 (en) 2015-12-22 2020-04-14 Fujifilm Corporation Focusing control device, imaging device, focusing control method, and nontransitory computer readable medium
EP3723358A1 (en) * 2019-04-10 2020-10-14 Canon Kabushiki Kaisha Image processing apparatus, control method thereof, and program
CN111818255A (en) * 2019-04-10 2020-10-23 佳能株式会社 Image processing apparatus and control method thereof
US11595562B2 (en) 2019-04-10 2023-02-28 Canon Kabushiki Kaisha Image processing apparatus, control method thereof, and storage medium

Similar Documents

Publication Publication Date Title
JP6271990B2 (en) Image processing apparatus and image processing method
JP5778998B2 (en) Imaging apparatus, image generation method, and computer program
US11184524B2 (en) Focus control device, focus control method, program, and imaging device
JP4018705B2 (en) Shading correction apparatus, correction method, and imaging apparatus
JP5115210B2 (en) Imaging device
JP5237721B2 (en) Imaging device
JP2009147658A (en) Imaging apparatus, control method therefor, and program
JP6518452B2 (en) Imaging apparatus and imaging method
KR101728042B1 (en) Digital photographing apparatus and control method thereof
JP2008289032A (en) Imaging apparatus
JP4764712B2 (en) Digital camera and control method thereof
JP2014013368A (en) Imaging apparatus and control method thereof
JP2007011054A (en) Imaging apparatus, control method for imaging apparatus and computer program
US10554891B2 (en) Image stabilization apparatus, image stabilization method, image capturing apparatus, image capturing system and non-transitory storage medium
JP5217451B2 (en) Imaging device
US11513315B2 (en) Focus control device, focus control method, program, and imaging device
JP2012194487A (en) Imaging device, imaging method and program
JP6486453B2 (en) Image processing apparatus, image processing method, and program
JP5179859B2 (en) Imaging apparatus and imaging method
JP2008017036A (en) Imaging device and method of controlling the same, and computer program
JP5455485B2 (en) Imaging device
JP2006243609A (en) Autofocus device
JP2009021929A (en) Imaging apparatus and imaging method
JP2004229084A (en) Blurring correcting instrument, method therefor and imaging apparatus
JP2006047645A (en) Focus adjusting device and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100921

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110328

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110926

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120306