JP2012093775A - Focus detector and imaging apparatus - Google Patents
Focus detector and imaging apparatus Download PDFInfo
- Publication number
- JP2012093775A JP2012093775A JP2011273375A JP2011273375A JP2012093775A JP 2012093775 A JP2012093775 A JP 2012093775A JP 2011273375 A JP2011273375 A JP 2011273375A JP 2011273375 A JP2011273375 A JP 2011273375A JP 2012093775 A JP2012093775 A JP 2012093775A
- Authority
- JP
- Japan
- Prior art keywords
- focus detection
- image
- focus
- area
- tracking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は焦点検出装置および撮像装置に関する。 The present invention relates to a focus detection apparatus and an imaging apparatus.
撮影画面内に設定された複数の焦点検出エリアにおいて撮影レンズのデフォーカス量を検出し、いずれかのエリアのデフォーカス量に基づいて撮影レンズを合焦駆動する自動焦点調節(AF)機能と、撮影画像の中の追尾対象の被写体の画像をテンプレート画像(基準画像)として記憶し、繰り返し撮像される画像の中でテンプレート画像と同一または類似した画像の位置を検索しながら追尾対象の被写体を追尾する画像追尾機能とを備え、画像追尾結果の追尾位置の焦点検出エリアを選択してその焦点検出エリアのデフォーカス量により撮影レンズを合焦駆動するオートフォーカスシステムが知られている(例えば、この出願の発明に関連する先行技術文献としては次のものがある。特許文献1参照)。 An automatic focus adjustment (AF) function for detecting the defocus amount of the photographing lens in a plurality of focus detection areas set in the photographing screen and driving the photographing lens based on the defocus amount of any area; The image of the subject to be tracked in the photographed image is stored as a template image (reference image), and the subject to be tracked is tracked while searching for the position of the same or similar image as the template image in the repeatedly captured image. There is known an autofocus system that includes an image tracking function for selecting a focus detection area at a tracking position of an image tracking result and driving a photographing lens in focus by a defocus amount of the focus detection area (for example, this Prior art documents related to the invention of the application include the following (see Patent Document 1).
しかしながら、上述した従来のオートフォーカスシステムでは、画像追尾結果の追尾位置に複数の焦点検出エリアがある場合、どの焦点検出エリアを焦点調節を行うエリアに採用したのか、あるいは、画像追尾結果の追尾位置にある焦点検出エリアで焦点検出不能もしくは焦点検出結果の信頼性がない場合に、追尾位置以外のどの焦点検出エリアを焦点調節を行うエリアに採用したのか判らないので、対象とする被写体を正しく追尾しているのかどうかを認識することができなかった。 However, in the above-described conventional autofocus system, when there are a plurality of focus detection areas at the tracking position of the image tracking result, which focus detection area is adopted as the area for focus adjustment, or the tracking position of the image tracking result If focus detection is not possible in the focus detection area or the focus detection result is not reliable, it is not known which focus detection area other than the tracking position has been adopted as the area for focus adjustment. I couldn't recognize whether I was doing it.
(1) 請求項1の発明は、結像光学系による画面内の画像情報を撮像素子により取得し、基準とする像に関する基準情報と画像情報とに基づいて画面内における対象の領域を検出する画像検出手段と、画面内に設定された複数の焦点検出位置における結像光学系の焦点調節状態を検出する焦点検出手段と、画像検出手段による対象の領域の検出結果と、焦点検出手段による焦点調節状態の検出結果とに基づいて、複数の焦点検出位置のいずれかを選択する選択手段と、画面上に焦点検出位置を重畳して表示する表示手段と、選択手段により選択された焦点検出位置が対象の領域内またはその近傍にある場合には、対象の領域の中央に最も近い焦点検出位置を表示手段に表示する制御手段とを備える。
(2) 請求項2の焦点検出装置は、制御手段によって、選択手段により選択された焦点検出位置が対象の領域内およびその近傍にない場合には、選択された焦点検出位置を表示手段に表示するようにしたものである。
(3) 請求項3の焦点検出装置は、選択手段によって、繰り返し前記選択を行うとともに、対象の領域内およびその近傍にある焦点検出位置のいずれに対しても焦点検出手段による焦点検出が不能、または焦点検出結果の信頼性がない場合には、対象の領域内およびその近傍以外の位置にある焦点検出位置に対して検出された焦点調節状態の内、前回選択した焦点検出位置に対する焦点調節状態と類似する焦点調節状態を示す焦点検出位置を選択し、制御手段によって、選択手段により選択された焦点検出位置を表示手段に表示するようにしたものである。
(4) 請求項4の焦点検出装置は、選択手段によって、繰り返し選択を行うとともに、画像検出手段により画面内で対象の領域が検出できない場合には、焦点検出手段により検出された焦点調節状態の内、前回選択した焦点検出位置に対する焦点調節状態と類似する
焦点調節状態を示す焦点検出位置を選択し、制御手段によって、選択手段により選択された焦点検出位置を表示手段に表示するようにしたものである。
(5) 請求項5の発明は、請求項1〜4のいずれか1項に記載の焦点検出装置を備えた撮像装置である。
(1) According to the first aspect of the present invention, the image information in the screen by the imaging optical system is acquired by the imaging device, and the target region in the screen is detected based on the reference information and the image information regarding the reference image. Image detection means, focus detection means for detecting the focus adjustment state of the imaging optical system at a plurality of focus detection positions set in the screen, detection results of the target area by the image detection means, and focus by the focus detection means A selection unit that selects one of a plurality of focus detection positions based on the detection result of the adjustment state, a display unit that displays the focus detection position superimposed on the screen, and a focus detection position selected by the selection unit Control means for displaying on the display means the focus detection position closest to the center of the target area.
(2) The focus detection apparatus according to
(3) The focus detection apparatus according to
(4) In the focus detection apparatus according to the fourth aspect, the selection means repeatedly performs selection, and if the target area cannot be detected within the screen by the image detection means, the focus adjustment state detected by the focus detection means is detected. Among them, a focus detection position showing a focus adjustment state similar to the focus adjustment state for the previously selected focus detection position is selected, and the focus detection position selected by the selection means is displayed on the display means by the control means. It is.
(5) The invention according to
本発明によれば、撮影者は追尾したい被写体をカメラが正確に追尾しているか否かを容易に確認することができる。 According to the present invention, the photographer can easily confirm whether or not the camera accurately tracks the subject to be tracked.
撮影画面内に設定された複数の焦点検出エリアにおいて撮影レンズの焦点調節状態(この一実施の形態ではデフォーカス量)を検出し、いずれかのエリアのデフォーカス量に基づいて撮影レンズを合焦駆動する自動焦点調節(AF)機能と、撮影画像の中の追尾対象の被写体の画像をテンプレート画像(基準画像)として記憶し、繰り返し撮像される画像の中でテンプレート画像と同一または類似した画像の位置を検索しながら(テンプレートマッチング)追尾対象の被写体を追尾する画像追尾機能とを備え、AF機能と画像追尾機能により撮影レンズを駆動しながら対象を追尾する画像追尾装置を備えた撮像装置(一眼レフデジタルスチルカメラ)の一実施の形態を説明する。 The focus adjustment state of the photographic lens (in this embodiment, the defocus amount) is detected in a plurality of focus detection areas set in the photographic screen, and the photographic lens is focused based on the defocus amount in one of the areas. The automatic focus adjustment (AF) function to be driven and the image of the subject to be tracked in the photographed image are stored as a template image (reference image). An image pickup apparatus (single-lens) having an image tracking function for tracking a subject to be tracked while searching for a position (template matching), and tracking an object while driving a photographing lens with an AF function and an image tracking function An embodiment of a reflex digital still camera will be described.
図1は、一実施の形態の画像追尾装置を備えた撮像装置(一眼レフデジタルスチルカメラ)1の構成を示す。なお、図1では本願発明と直接関係のないカメラの機器および回路についての図示と説明を省略する。一実施の形態のカメラ1は、カメラ本体2に交換レンズ3が交換可能に装着される。カメラ本体2には被写体像を撮像して画像を記録するための第1撮像素子4が設けられる。この第1撮像素子4はCCDやCMOSなどにより構成することができる。撮影時にはクイックリターンミラー5およびサブミラー6が実線で示す撮影光路外の位置に退避してシャッター7が開放され、撮影レンズ8により第1撮像素子4の受光面に被写体像が結像される。
FIG. 1 shows a configuration of an imaging apparatus (single-lens reflex digital still camera) 1 including an image tracking apparatus according to an embodiment. In FIG. 1, illustration and description of camera devices and circuits not directly related to the present invention are omitted. In a
カメラ本体2の底部には、撮影レンズ8の焦点調節状態を検出するための焦点検出光学系9と測距素子10が設けられている。この一実施の形態では、瞳分割型位相差検出方式による焦点検出方法を採用した例を示す。焦点検出光学系9は、撮影レンズ8を通過した対の焦点検出用光束を測距素子10の受光面へ導き、対の光像を結像させる。測距素子10は例えば対のCCDラインセンサーを備え、対の光像に応じた焦点検出信号を出力する。撮影前にはクイックリターンミラー5およびサブミラー6が破線で示すような撮影光路内の位置に設定されており、撮影レンズ8からの対の焦点検出用光束はクイックリターンミラー5のハーフミラー部を透過し、サブミラー6により反射されて焦点検出光学系9および測距素子10へ導かれる。
At the bottom of the
カメラ本体2の上部にはファインダー光学系が設けられている。撮影前にはクイックリターンミラー5およびサブミラー6が破線で示す位置にあり、撮影レンズ8からの被写体光はクイックリターンミラー5に反射されて焦点板11へ導かれ、焦点板11上に被写体像が結像する。液晶表示素子12は、焦点板11上に結像された被写体像に焦点検出エリアマークなどの情報を重畳表示するとともに、被写体像外の位置に露出値などの種々の撮影情報を表示する。焦点板11上の被写体像はペンタダハプリズム13および接眼レンズ14を介して接眼窓15へ導かれ、撮影者が被写体像を視認することができる。
A finder optical system is provided on the upper part of the
また、カメラ本体2上部のファインダー光学系には、被写体追尾や測光のために被写体像を撮像する第2撮像素子16が設けられる。焦点板11に結像した被写体像は、ペンタダハプリズム13、プリズム17および結像レンズ18を介して第2撮像素子16の受光面に再結像される。第2撮像素子16は被写体像に応じた画像信号を出力する。撮影前に
焦点板11上に結像された被写体像は、ペンタダハプリズム13、プリズム17および結像レンズ18を介して第2撮像素子16へ導かれ、第2撮像素子16の受光面に被写体像が再結像される。詳細を後述するが、この第2撮像素子16により撮像された被写体像に基づいて画像追尾制御と露出演算が行われる。
The finder optical system at the top of the
カメラ本体2にはまた、ボディ駆動制御装置19、操作部材20などが設けられる。ボディ駆動制御装置19は、詳細を後述するマイクロコンピューターとメモリ、A/D変換器などの周辺部品から構成され、カメラ1の種々の制御と演算を行う。操作部材20には、シャッターボタン、焦点検出エリア選択スイッチ、撮影モード選択スイッチなどのカメラ1を操作するためのスイッチやセレクターが含まれる。
The
交換レンズ3には、ズーミングレンズ8a、フォーカシングレンズ8b、絞り21、レンズ駆動制御装置22などが設けられる。なお、この一実施の形態では撮影レンズ8をズーミングレンズ8a、フォーカシングレンズ8bおよび絞り21で体表的に表すが、撮影レンズ8の構成は図1に示す構成に限定されない。レンズ駆動制御装置22は図示しないマイクロコンピューターとメモリ、駆動回路、アクチュエーターなどの周辺部品から構成され、レンズ8a、8bおよび絞り21の駆動制御とそれらの設定位置検出を行う。レンズ駆動制御装置22に内蔵されるメモリには、交換レンズ3の焦点距離や開放絞り値などの情報が記憶されている。
The
ボディ駆動制御装置19とレンズ駆動制御装置22はレンズマウント部の接点23を介して通信を行い、ボディ駆動制御装置19からレンズ駆動制御装置22へレンズ駆動量や絞り値などの情報を送信し、レンズ駆動制御装置22からボディ駆動制御装置19へレンズ情報や絞り情報を送信する。モニター24はカメラ本体2の背面に設けられ、スルー画や撮影画像の他に各種撮影情報を表示する。
The body
図2はボディ駆動制御装置19の詳細な構成を示す。なお、本願発明と直接関係のない制御機能については図示と説明を省略する。ボディ駆動制御装置19は素子制御回路19a、A/D変換器19b、マイクロコンピューター19c、メモリ19dなどを備えている。素子制御回路19aは第2撮像素子16の電荷の蓄積と読み出しを制御する。A/D変換器19bは、第2撮像素子16から出力されるアナログ画像信号をデジタル画像信号に変換する。マイクロコンピューター19cは、ソフトウエア形態により追尾制御部19e、露出制御部19f、焦点検出演算部19gおよびレンズ駆動量演算部19hを構成する。メモリ19dは、画像追尾用のテンプレート画像(基準画像)やデフォーカス量などの情報、あるいは撮影レンズ8の焦点距離、開放F値、絞り値、像ズレ量からデフォーカス量への変換係数などのレンズ情報を記憶する。
FIG. 2 shows a detailed configuration of the body
追尾制御部19eは、第2撮像素子16により撮像した被写体像の内、撮影者が手動で指定した追尾対象位置、あるいはカメラ1が自動で設定した追尾対象位置に対応する画像をテンプレート画像(基準画像)としてメモリ19dに記憶させ、その後に繰り返し撮影
される画像の中からテンプレート画像と一致または類似する画像領域を検索することによって対象の位置を認識する。露出演算部19fは、第2撮像素子16により撮像した画像信号に基づいて露出値を演算する。
The
焦点検出演算部19gは、測距素子10から出力される対の光像に応じた焦点検出信号に基づいて撮影レンズ8の焦点調節状態、ここではデフォーカス量を検出する。なお、詳細を後述するが、撮影レンズ8の撮影画面内には複数の焦点検出エリアが設定されており、測距素子10は焦点検出エリアごとに対の光像に応じた焦点検出信号を出力し、焦点検出演算部19gは焦点検出エリアごとに対の光像に応じた焦点検出信号に基づいてデフォーカス量を検出する。レンズ駆動量演算部19hは検出されたデフォーカス量をレンズ駆
動量に変換する。
The focus
図3は第2撮像素子16の詳細な構成を示す正面図である。第2撮像素子16は、マトリクス状に配列された複数の画素(光電変換素子)26(ここでは横16個×縦12個=192個)を備えている。各画素26は図4に示すように3個の部分26a、26b、26cに分割され、これらの部分26a、26b、26cにはそれぞれ赤R、緑G、青Bの原色フィルターが設けられている。これにより、各画素26ごとに被写体像のRGB信号を出力することができる。
FIG. 3 is a front view showing a detailed configuration of the
次に、一実施の形態の被写体追尾動作を説明する。図5〜図8は一実施の形態の被写体追尾方法を説明するための図、図9〜図11は一実施の形態の被写体追尾処理を示すフローチャートである。シャッターボタンを全押しして撮影を行うとき以外は、クイックリターンミラー5が図1に破線で示す撮影光路内に設定されており、撮影レンズ8から入射した被写体光は焦点板11上に結像される。そして、焦点板11上の被写体像はペンタダハプリズム13、プリズム17および結像レンズ18を介して第2撮像素子16へ導かれ、第2撮像素子16から被写体像信号が繰り返し出力される。
Next, a subject tracking operation according to an embodiment will be described. 5 to 8 are diagrams for explaining a subject tracking method according to an embodiment, and FIGS. 9 to 11 are flowcharts illustrating subject tracking processing according to the embodiment. The
図5および図6は、撮影者が接眼窓15から視認する被写体像(ファインダー像)である。撮影レンズ8により焦点板11上に結像された被写体像には、液晶表示素子12により焦点検出エリアマークなどの情報が重畳表示され、ペンタダハプリズム13および接眼レンズ14を介して接眼窓15へ導かれ、撮影者が被写体像を視認することができる。この一実施の形態では、撮影レンズ8の撮影画面44内に45個の焦点検出エリアが設定されており、液晶表示素子12により焦点板11上の被写体像にエリアマーク45を重畳し、各焦点検出エリアの位置を表示する。操作部材20の焦点検出エリア選択スイッチにより任意のエリアを選択すると、そのエリアのマーク45が点灯表示される。
5 and 6 are subject images (viewfinder images) that the photographer visually recognizes from the
操作部材20の焦点検出エリア選択スイッチによりいずれかの焦点検出エリアが選択され、この状態で操作部材20のシャッターボタンが半押しされると、その焦点検出エリアが初回AFエリアとしてメモリ19dに記憶される。これにより、追尾対称の被写体が指定される。なお、ここでは撮影者が初回AFエリアを選択して追尾対象の被写体を手動で指定する例を示したが、例えば自動的に被写体を認識する機能を備えたカメラでは被写体認識結果に基づいて初回AFエリアおよび追尾対象被写体を設定してもよい。
When one of the focus detection areas is selected by the focus detection area selection switch of the
ステップ1において、第2撮像素子16により追尾初期画像(画像追尾処理を開始して最初に取得する画像)を取得する。この追尾初期画像は画素ごとにRGB値で表す。
R[x,y]、G[x,y]、B[x,y] ・・・(1)
この画素ごとのRGB値に基づいて各画素の色情報RG、BG、画像を取得したときの露光時間T、ゲインGain、色合成係数Kr、Kg、Kbから輝度情報Lを算出する。
RG[x,y]=Log2(R[x,y])−Log2(G[x,y]),
BG[x,y]=Log2(B[x,y])−Log2(G[x,y]),
L[x,y]=Log2(Kr×R[x,y]+Kg×G[x,y]+Kb×B[x,y])−Log2(T)−Log2(Gain) ・・・(2)
In
R [x, y], G [x, y], B [x, y] (1)
Based on the RGB values for each pixel, the luminance information L is calculated from the color information RG and BG of each pixel, the exposure time T when the image is acquired, the gain Gain, and the color synthesis coefficients Kr, Kg, and Kb.
RG [x, y] = Log 2 (R [x, y]) − Log 2 (G [x, y]),
BG [x, y] = Log 2 (B [x, y]) − Log 2 (G [x, y]),
L [x, y] = Log 2 (Kr × R [x, y] + Kg × G [x, y] + Kb × B [x, y]) − Log 2 (T) −Log 2 (Gain) (2)
続くステップ2では、図10に示す追尾制御初期処理を実行する。図10のステップ101において、第2撮像素子16で取得した追尾初期画像の中の初回AFエリアの位置に対応する位置の画像を、被写体色情報として記憶する。ステップ102では、図7(a)に示すように、追尾初期画像の中の初回AFエリアの位置周辺部において被写体色情報と同様な色情報を示す同色情報領域を検出し、続くステップ103で同色情報領域を初期の追尾被写体領域47とする。
In the
ステップ104において、追尾初期画像の中の追尾被写体領域47の画像を画像追尾処理に用いるテンプレート画像48(図7(b)参照)としてメモリ19dに記憶する。例えば、追尾被写体領域47の始点位置が図7(a)に示すように(x,y)=(4,5)の場合には、テンプレート画像48の色情報は次のように表される。
RGref[rx,ry]=RG[x,y]、
BGref[rx,ry]=BG[x,y]、
Lref[rx,ry]=L[x,y] (rx,ry=1〜3、x=4〜6、y=5〜7) ・・・(3)
In step 104, the image of the tracking
RGref [rx, ry] = RG [x, y],
BGref [rx, ry] = BG [x, y],
Lref [rx, ry] = L [x, y] (rx, ry = 1 to 3, x = 4 to 6, y = 5 to 7) (3)
次に、ステップ105で追尾被写体領域47を中心に前後左右に所定画素(ここでは2画素とする)づつ拡大した領域を探索領域49に設定する。図7(a)に示す例では、探索領域49は、x=2〜8、y=3〜9の領域になる。
Next, in step 105, an area enlarged by predetermined pixels (here, two pixels) around the tracking
追尾制御の初期処理が終了したら図8のステップ3へ進み、操作部材20のシャッターボタンが全押しされたか否か、つまりシャッターレリーズ操作が行われたか否かを確認する。シャッターレリーズ操作がない場合はステップ4へ進み、第2撮像素子16から追尾次画像を取得し、ステップ1の処理と同様に色情報RG[x,y]、BG[x,y]および輝度情報L[x,y]を算出し、メモリ19dに記憶する。同時に、測距素子10により、各焦
点検出エリアごとに焦点検出用の対の光像に応じた焦点検出信号を取得する。
When the initial processing of the tracking control is completed, the process proceeds to step 3 in FIG. 8 to check whether or not the shutter button of the
ステップ5では、図11に示す追尾演算処理を実行する。図11のステップ201において、追尾次画像の中の探索領域49からテンプレート画像48と同じサイズの領域を順次切り出し、切り出した画像とテンプレート画像48の対応する画素ごとに色情報の差分Diffを算出する。図8(a)に太い破線で示すように、探索領域49の中で1画素ずつ領
域をずらしながらテンプレート画像48との色情報の差分Diffを算出する。
In
今、図8(a)に示すように探索領域49の始点位置が(scx,scy)=(2,3)であるとすると、差分Diffの演算は次のようにして行う。
Diff[dx,dy]=ΣΣ{ABS(RG[scx+dx−1+rx,scy+dy−1+r
y]−RGref[rx,ry])+ABS(BG[scx+dx−1+rx,scy+dy−1+ry]−BGref[rx,ry])+ABS(L[scx+dx−1+rx,scy+dy−1+ry]−Lref[rx,ry])} ・・・(4)
(4)式において、dx,dy=1〜5、rx,ry=1〜3、scx=2、scy=3、ΣΣはrx=1〜3およびry=1〜3の総和演算である。
Assuming that the starting point position of the
Diff [dx, dy] = ΣΣ {ABS (RG [scx + dx−1 + rx, scy + dy−1 + r
y] -RGref [rx, ry]) + ABS (BG [scx + dx-1 + rx, scy + dy-1 + ry] -BGref [rx, ry]) + ABS (L [scx + dx-1 + rx, scy + dy-1 + ry] -Lref [rx, ry]) } (4)
In the equation (4), dx, dy = 1 to 5, rx, ry = 1 to 3, scx = 2, scy = 3, and ΣΣ is a sum operation of rx = 1 to 3 and ry = 1 to 3.
次に、ステップ202において、差分Diff[dx,dy]の中の最小の差分を検索し、探索領域49内で最小の差分を算出したときの上記切り出し領域を新しい追尾被写体領域47に決定する。ここでは、図8(b)に示すように、始点位置が(x,y)=(5,6)の切り出し領域を新しい追尾被写体領域47とする。
Next, in step 202, the minimum difference in the difference Diff [dx, dy] is searched, and the cutout area when the minimum difference is calculated in the
ここで、新しく被写体領域47に決定された画像情報を用いてテンプレート画像48の画像情報を更新する処理を加えてもよい。その場合、例えば元のテンプレート画像48の画像情報80%に対して新被写体領域47の画像情報20%を加えることによって、テンプレート画像の情報に対して最新の画像情報が少しずつ更新され、追尾被写体の変化に追従しやすくなる。この場合、追尾演算のたびに毎回更新を行うのではなく、追尾被写体領域47として決定した位置の差分Diffの大きさに基づいて、あるしきい値より小さいと
きのみ更新するようにしてもよい。
Here, a process of updating the image information of the
ステップ203では、新しい追尾被写体領域47を中心に前後左右に所定画素(ここでは2画素とする)づつ拡大した領域を新しい探索領域49に設定する。ここでは、図8(
b)に示すように、x=3〜9、y=4〜10の領域を新しい探索領域49とする。その
後、図9のステップ6へリターンする。
In step 203, an area enlarged by predetermined pixels (here, two pixels) around the new
As shown in b), a region where x = 3 to 9 and y = 4 to 10 is set as a
リターン後の図9のステップ6において、ステップ4にて取得した焦点検出信号に基づいて各選択焦点検出エリアの撮影レンズ8の焦点調節状態、すなわちデフォーカス量を検出する。続くステップ7では、すべての焦点検出エリアのデフォーカス量の中から、前回の焦点調節時に採用した焦点検出エリアのデフォーカス量に類似するデフォーカス量を示す焦点検出エリアを検索する。
In
ステップ8において、ステップ5における画像追尾結果の新追尾被写体領域と、ステップ6〜7におけるエリア検索結果の焦点検出エリアとに基づいて、焦点調節を行うエリアを決定する。この一実施の形態では、画像追尾結果の新追尾被写体領域47に対応する焦点検出エリアと、エリア検索結果の焦点検出エリアとを比較し、画像追尾結果とエリア探索結果とに共通の焦点検出エリアを焦点調節を行うエリア(以下、焦点調節エリアという)に決定する。
In
具体的には、図5に示すように、画像追尾結果の新追尾被写体領域47内またはその近傍にある焦点検出エリアの内のいずれかが、エリア探索結果の焦点検出エリアと一致した場合には、その一致した焦点検出エリアを上記焦点調節エリアに決定する。しかしこのとき、液晶表示素子12により新追尾被写体領域47の中央に最も近い焦点検出エリア46のエリアマークを点灯表示する。この場合、追尾対象の被写体像50の中央の焦点検出エリア46が点灯表示される確率が高く、撮影者は追尾したい被写体をカメラが正確に追尾しているか否かを容易に確認することができる。
Specifically, as shown in FIG. 5, when one of the focus detection areas in or near the new
一方、図6に示すように、画像追尾結果の新追尾被写体領域47内およびその近傍にある焦点検出エリアと、エリア検索結果の焦点検出エリアとが一致しなかった場合には、新追尾被写体領域47内およびその近傍以外の位置にあるすべての焦点検出エリアで検出されたデフォーカス量の内、前回の焦点調節時に焦点調節を行った焦点検出エリアのデフォーカス量と類似するデフォーカス量を示す焦点検出エリアを焦点調節を行う焦点検出エリアに決定し、焦点調節を行うエリアに決定した焦点検出エリア46のエリアマークを点灯表示する。この場合、撮影画面44内のどの部分にピントを合わせるのかを明確に表示することができ、撮影者が追尾したい被写体をカメラが正確に追尾できているか否かを容易に確認することができる。
On the other hand, as shown in FIG. 6, when the focus detection area in and near the new
ここで、画像追尾結果の新追尾被写体領域47とエリア検索結果の焦点検出エリアとが一致しない原因としては、以下に示す(1)、(2)の原因が考えられる。
Here, the following causes (1) and (2) can be considered as the reason why the new
(1) 上述したテンプレート差分演算結果の差分Diff[dx,dy]が類似判定しきい値を超え、撮影した画像の中にテンプレート画像48と類似する像が検出されなかった場合には、画像追尾により新追尾被写体領域47を決定することができず、画像追尾結果の新追尾被写体領域47とエリア検索結果の焦点検出エリアとが一致しない。この原因としては、追尾対象の被写体が別の被写体の陰になったり、追尾対象の被写体の向きが変わって、撮影画像の中からテンプレート画像48と類似する像を検出できない場合が考えられる。
(1) If the difference Diff [dx, dy] of the template difference calculation result described above exceeds the similarity determination threshold and no image similar to the
画像追尾機能により撮影画面内で追尾被写体領域47が検出できない場合には、AF機能により検出されたデフォーカス量の内、前回の焦点調節時に焦点調節を行った焦点検出エリアのデフォーカス量と類似するデフォーカス量を示す焦点検出エリアを今回の焦点調節を行う焦点検出エリアに決定し、決定された焦点調節を行う焦点検出エリアのエリアマークを点灯表示する。これにより、図6に示すように、撮影画面44内のどの部分にピン
トを合わせるのかを明確に表示することができ、撮影者が追尾したい被写体をカメラが正確に追尾できているか否かを容易に確認することができる。
If the tracking
(2) 新追尾被写体領域47内のすべての焦点検出エリアにおいて、信頼性のあるデフォーカス量が検出できなかった場合、あるいは焦点検出不能になった場合には、新追尾被写体領域47外の焦点検出エリアの内、前回の焦点調節時に採用した焦点検出エリアのデフォーカス量に類似するデフォーカス量を示す焦点検出エリアを検索することになり、画像追尾結果の新追尾被写体領域47とエリア検索結果の焦点検出エリアとが一致しない。この原因としては、同じような色の被写体が背景にあったり、同じような被写体がいくつかあってテンプレート画像48と類似する像を検出できるが、新追尾被写体領域47内の焦点検出エリアのデフォーカス量が前回の焦点調節時に採用した焦点検出エリアのデフォーカス量と大きく異なる場合が考えられる。
(2) If a reliable defocus amount cannot be detected in all focus detection areas in the new
新追尾被写体領域47内およびその近傍にあるすべての焦点検出エリアでAF機能による焦点検出が不能、または焦点検出結果の信頼性がない場合には、新追尾被写体領域47内およびその近傍以外の位置にあるすべての焦点検出エリアで検出されたデフォーカス量の内、前回の焦点調節時に焦点調節を行った焦点検出エリアのデフォーカス量と類似するデフォーカス量を示す焦点検出エリアを焦点調節を行う焦点検出エリアに決定し、決定された焦点調節を行う焦点検出エリアのエリアマークを点灯表示する。これにより、図6に示すように、撮影画面44内のどの部分にピントを合わせるのかを明確に表示することができ、撮影者が追尾したい被写体をカメラが正確に追尾できているか否かを容易に確認することができる。
If focus detection by the AF function is impossible in all the focus detection areas in and near the new
図9のステップ9において、焦点調節エリアで検出されたデフォーカス量をレンズ駆動量に変換し、レンズ駆動制御装置22によりフォーカシングレンズ8bを駆動して焦点調節を行う。焦点調節後のステップ3でレリーズボタンの全押しを確認する。シャッターボタンが半押しされている間、ステップ4〜9の処理を繰り返し実行し、シャッターボタンが全押しされるとステップ10へ進み、撮影処理を実行する。
In
このように、一実施の形態によれば、撮影レンズ8による結像画像を第2撮像素子16により取得し、追尾対象の像に関する基準画像と上記結像画像とに基づいて撮影画面内の追尾被写体領域を検出する画像追尾機能と、撮影画面内の複数の焦点検出エリアにおいて撮影レンズ8のデフォーカス量を検出するAF機能とを備え、画像追尾機能による追尾被写体領域の検出結果とAF機能によるデフォーカス量の検出結果とに基づいて、撮影レンズ8の焦点調節を行う焦点検出エリアを決定し、撮影レンズ8による結像画像上に焦点検出エリアのエリアマークを重畳して点灯表示する際に、決定された焦点調節を行う焦点検出エリアが追尾被写体領域内またはその近傍にある場合には、追尾被写体領域の中央に最も近い焦点検出エリアのエリアマークを点灯表示する。これにより、追尾対象の被写体像の中央の焦点検出エリアが点灯表示される確率が高く、撮影者は追尾したい被写体をカメラが正確に追尾しているか否かを容易に確認することができる。
As described above, according to the embodiment, the image formed by the
一方、一実施の形態によれば、決定された焦点調節を行う焦点検出エリアが追尾被写体領域内およびその近傍にない場合には、焦点調節を行う焦点検出エリアのエリアマークを点灯表示する。これにより、撮影画面内のどの部分にピントを合わせるのかを明確に表示することができ、撮影者が追尾したい被写体をカメラが正確に追尾できているか否かを容易に確認することができる。 On the other hand, according to one embodiment, when the focus detection area for performing the determined focus adjustment is not in or near the tracking subject area, the area mark of the focus detection area for performing the focus adjustment is lit and displayed. Thus, it is possible to clearly display which part in the shooting screen is to be focused, and it is possible to easily check whether the camera is accurately tracking the subject that the photographer wants to track.
8 撮影レンズ
10 測距素子
16 第2撮像素子
19 ボディ駆動制御装置
19d メモリ
22 レンズ駆動制御装置
8
請求項1の発明による焦点検出装置は、結像光学系による画面内の画像情報を撮像素子により取得し、基準とする像に関する基準情報と前記画像情報とに基づいて前記画面内における対象の領域を検出する画像検出手段と、前記画面内に設定された複数の焦点検出位置における前記結像光学系の焦点調節状態を検出する焦点検出手段と、前記画像検出手段による前記対象の領域の検出結果と、前記焦点検出手段による焦点調節状態の検出結果とに基づいて、前記複数の焦点検出位置のいずれかを選択する選択手段と、前記画面上に前記焦点検出位置を重畳して表示する表示手段と、前記選択手段により選択された前記焦点検出位置が前記対象の領域内またはその近傍にある場合には、前記対象の領域の中央に最も近い前記焦点検出位置を前記表示手段に表示する制御手段とを備えることを特徴とする。
請求項2の発明による焦点検出装置は、結像光学系による画面内の画像情報を出力する出力部と、基準とする像に関する基準情報、及び、前記画像情報を用いて前記画面内における対象の領域を検出する領域検出部と、複数の焦点検出位置における前記結像光学系の焦点調節状態を検出する焦点検出部と、前記領域検出部による前記対象の領域の検出結果、及び、前記焦点検出部による焦点調節状態の検出結果を用いて、前記複数の焦点検出位置のいずれかを選択する選択部と、前記選択部により選択された前記焦点検出位置が前記対象の領域内またはその近傍にある場合には、前記対象の領域の中央に最も近い前記焦点検出位置を表示する表示部と、前記表示部を制御する制御部とを含むことを特徴とする。
According to a first aspect of the present invention, a focus detection apparatus acquires image information in a screen by an imaging optical system using an image sensor, and a target area in the screen based on reference information about the reference image and the image information. Image detection means for detecting a focus detection means for detecting a focus adjustment state of the imaging optical system at a plurality of focus detection positions set in the screen, and a detection result of the target region by the image detection means And a selection means for selecting one of the plurality of focus detection positions based on the detection result of the focus adjustment state by the focus detection means, and a display means for displaying the focus detection position superimposed on the screen And when the focus detection position selected by the selection means is in or near the target area, the focus detection position closest to the center of the target area is And a controlling means for displaying the shown means.
According to a second aspect of the present invention, there is provided a focus detection apparatus that outputs an image information in a screen by an imaging optical system, reference information about a reference image, and a target in the screen using the image information. A region detection unit for detecting a region; a focus detection unit for detecting a focus adjustment state of the imaging optical system at a plurality of focus detection positions; a detection result of the target region by the region detection unit; and the focus detection A selection unit that selects one of the plurality of focus detection positions using the detection result of the focus adjustment state by the unit, and the focus detection position selected by the selection unit is in or near the target region In this case, the display unit may include a display unit that displays the focus detection position closest to the center of the target area, and a control unit that controls the display unit.
Claims (5)
前記画面内に設定された複数の焦点検出位置における前記結像光学系の焦点調節状態を検出する焦点検出手段と、
前記画像検出手段による前記対象の領域の検出結果と、前記焦点検出手段による焦点調節状態の検出結果とに基づいて、前記複数の焦点検出位置のいずれかを選択する選択手段と、
前記画面上に前記焦点検出位置を重畳して表示する表示手段と、
前記選択手段により選択された前記焦点検出位置が前記対象の領域内またはその近傍にある場合には、前記対象の領域の中央に最も近い前記焦点検出位置を前記表示手段に表示する制御手段とを備えることを特徴とする焦点検出装置。 Image detection means for acquiring image information in the screen by the imaging optical system by the imaging device, and detecting the target region in the screen based on the reference information about the image serving as a reference and the image information;
Focus detection means for detecting a focus adjustment state of the imaging optical system at a plurality of focus detection positions set in the screen;
A selection unit that selects one of the plurality of focus detection positions based on a detection result of the target region by the image detection unit and a detection result of a focus adjustment state by the focus detection unit;
Display means for superimposing and displaying the focus detection position on the screen;
Control means for displaying the focus detection position closest to the center of the target area on the display means when the focus detection position selected by the selection means is in or near the target area; A focus detection apparatus comprising the focus detection apparatus.
前記制御手段は、前記選択手段により選択された前記焦点検出位置が前記対象の領域内およびその近傍にない場合には、前記選択された焦点検出位置を前記表示手段に表示することを特徴とする焦点検出装置。 The focus detection apparatus according to claim 1,
The control means displays the selected focus detection position on the display means when the focus detection position selected by the selection means is not in or near the target region. Focus detection device.
前記選択手段は、繰り返し前記選択を行うとともに、前記対象の領域内およびその近傍にある前記焦点検出位置のいずれに対しても前記焦点検出手段による焦点検出が不能、または焦点検出結果の信頼性がない場合には、前記対象の領域内およびその近傍以外の位置にある前記焦点検出位置に対して検出された焦点調節状態の内、前回選択した焦点検出位置に対する焦点調節状態と類似する焦点調節状態を示す前記焦点検出位置を選択し、
前記制御手段は、前記選択手段により選択された前記焦点検出位置を前記表示手段に表示することを特徴とする焦点検出装置。 The focus detection apparatus according to claim 2,
The selection unit repeatedly performs the selection, and focus detection by the focus detection unit is impossible for any of the focus detection positions in and near the target region, or the reliability of the focus detection result is high. If not, out of the focus adjustment states detected for the focus detection position in a position other than the vicinity of the target region and the vicinity thereof, a focus adjustment state similar to the focus adjustment state for the previously selected focus detection position Select the focus detection position indicating
The focus detection apparatus, wherein the control means displays the focus detection position selected by the selection means on the display means.
前記選択手段は、繰り返し前記選択を行うとともに、前記画像検出手段により前記画面内で前記対象の領域が検出できない場合には、前記焦点検出手段により検出された焦点調節状態の内、前回選択した焦点検出位置に対する焦点調節状態と類似する焦点調節状態を示す前記焦点検出位置を選択し、
前記制御手段は、前記選択手段により選択された前記焦点検出位置を前記表示手段に表示することを特徴とする焦点検出装置。 The focus detection apparatus according to claim 1,
The selection means repeatedly performs the selection, and if the target area cannot be detected in the screen by the image detection means, the focus selected last time in the focus adjustment state detected by the focus detection means. Selecting the focus detection position showing a focus adjustment state similar to the focus adjustment state for the detection position;
The focus detection apparatus, wherein the control means displays the focus detection position selected by the selection means on the display means.
An imaging apparatus comprising the focus detection apparatus according to claim 1.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011273375A JP2012093775A (en) | 2011-12-14 | 2011-12-14 | Focus detector and imaging apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011273375A JP2012093775A (en) | 2011-12-14 | 2011-12-14 | Focus detector and imaging apparatus |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007169917A Division JP4888249B2 (en) | 2007-06-28 | 2007-06-28 | Focus detection apparatus and imaging apparatus |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012093775A true JP2012093775A (en) | 2012-05-17 |
Family
ID=46387083
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011273375A Pending JP2012093775A (en) | 2011-12-14 | 2011-12-14 | Focus detector and imaging apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012093775A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020198561A (en) * | 2019-06-04 | 2020-12-10 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Control device, camera device, camera system, control method and program |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0829674A (en) * | 1994-07-20 | 1996-02-02 | Nikon Corp | Automatic area selection camera |
WO2006082967A1 (en) * | 2005-02-07 | 2006-08-10 | Matsushita Electric Industrial Co., Ltd. | Imaging device |
JP2009111742A (en) * | 2007-10-30 | 2009-05-21 | Nikon Corp | Image recognition device, focus detection device, and imaging device |
JP2011107501A (en) * | 2009-11-19 | 2011-06-02 | Nikon Corp | Focusing device and imaging apparatus |
-
2011
- 2011-12-14 JP JP2011273375A patent/JP2012093775A/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0829674A (en) * | 1994-07-20 | 1996-02-02 | Nikon Corp | Automatic area selection camera |
WO2006082967A1 (en) * | 2005-02-07 | 2006-08-10 | Matsushita Electric Industrial Co., Ltd. | Imaging device |
JP2009111742A (en) * | 2007-10-30 | 2009-05-21 | Nikon Corp | Image recognition device, focus detection device, and imaging device |
JP2011107501A (en) * | 2009-11-19 | 2011-06-02 | Nikon Corp | Focusing device and imaging apparatus |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020198561A (en) * | 2019-06-04 | 2020-12-10 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Control device, camera device, camera system, control method and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4872834B2 (en) | Image recognition device, focus adjustment device, and imaging device | |
JP5176483B2 (en) | Image recognition device, image tracking device, and imaging device | |
JP5247076B2 (en) | Image tracking device, focus adjustment device, and imaging device | |
JP5167750B2 (en) | TRACKING DEVICE, IMAGING DEVICE, AND TRACKING METHOD | |
JP5157256B2 (en) | Image tracking device and imaging device | |
US8154605B2 (en) | Image tracking apparatus, image tracking method and camera for improved recognition of a target object | |
JP2009015117A (en) | Focusing device and image pickup apparatus | |
JP2009109839A (en) | Image tracking device and imaging device | |
JP2009033238A (en) | Imaging apparatus | |
JP4893334B2 (en) | Image tracking device and imaging device | |
JP4888249B2 (en) | Focus detection apparatus and imaging apparatus | |
JP5056136B2 (en) | Image tracking device | |
JP5403111B2 (en) | Image tracking device | |
JP4985155B2 (en) | Focus adjustment device and imaging device | |
JP2010200138A (en) | Photographic subject tracking device | |
JP5447579B2 (en) | Tracking device, focus adjustment device, and photographing device | |
JP2012093775A (en) | Focus detector and imaging apparatus | |
JP5541396B2 (en) | Image tracking device | |
JP5233646B2 (en) | Image tracking device, imaging device, and image tracking method | |
JP5176845B2 (en) | Image tracking device and imaging device | |
JP2010054586A (en) | Focusing device and imaging apparatus | |
JP5347834B2 (en) | Image tracking device | |
JP5772933B2 (en) | Imaging device | |
JP2018063439A (en) | Focus adjustment device and imaging device | |
JP2012191399A (en) | Image tracking device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130327 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130416 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130617 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140411 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141021 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141222 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150317 |