JP2004191629A - 焦点検出装置 - Google Patents
焦点検出装置 Download PDFInfo
- Publication number
- JP2004191629A JP2004191629A JP2002359474A JP2002359474A JP2004191629A JP 2004191629 A JP2004191629 A JP 2004191629A JP 2002359474 A JP2002359474 A JP 2002359474A JP 2002359474 A JP2002359474 A JP 2002359474A JP 2004191629 A JP2004191629 A JP 2004191629A
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- focus detection
- image
- pupil
- photoelectric conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/34—Systems for automatic generation of focusing signals using different areas in a pupil plane
Abstract
【課題】撮影光学系の口径食によって制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正できるようにする。
【解決手段】撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、射出瞳の第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量tと、焦点検出開口瞳の幅Tとの比に基づいて、第1の光電変換素子列からの像信号である第1の像信号と、第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって撮影光学系の焦点状態を検出する演算部とを具備する。
【選択図】 図10
【解決手段】撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、射出瞳の第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量tと、焦点検出開口瞳の幅Tとの比に基づいて、第1の光電変換素子列からの像信号である第1の像信号と、第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって撮影光学系の焦点状態を検出する演算部とを具備する。
【選択図】 図10
Description
【0001】
【発明の属する技術分野】
本発明は、撮影レンズの異なる瞳領域を通過した光束によって形成される2つの物体像の相対的位置関係より、撮影レンズの結像状態を検出する技術に関するものである。
【0002】
【従来の技術】
カメラの焦点検出方式にはいくつかの方法があるが、センサの各画素にマイクロレンズが形成された2次元の受光センサを用いて瞳分割方式の焦点検出を行う装置が特開昭58−24105号公報(特許文献1)に開示されている。
【0003】
図2は同公報で提案している瞳分割方式の焦点検出を行う方法の原理説明図である。
【0004】
イメージセンサ10は撮影レンズ5の予定結像面に配置されている。また、イメージセンサ10の1画素は2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0005】
ここで、光電変換素子13αは主に撮影レンズ5の瞳の図中上方を透過する光束を受光し、光電変換素子13βは主に撮影レンズ5の瞳の図中下方を透過する光束を受光する。焦点検出時は、各光電変換素子からの出力をそれぞれ読み出し、さらに複数の画素からの出力より撮影レンズの異なる瞳位置を透過した光束による像信号が生成される。
【0006】
また、本願出願人は瞳分割方式の焦点検出を行うことが可能な焦点検出装置を特開2001−124984号公報(特許文献2)に開示している。同公報の焦点検出装置は、一対の光電変換素子を、二次元に配置したマイクロレンズアレイごとに設け、このマイクロレンズより、光電変換素子を撮影光学系の瞳に投影することで、瞳を分割している。撮影光学系の瞳の異なる部分を通過した2光束の光電変換素子列の出力から得られる第1の像信号と第2の像信号(以下、A像信号、B像信号と称す)の位相差に基づいて撮影レンズの焦点状態を検出するものである。ここで、位相差とはA像信号、B像信号の相対的な位置関係のことである。
【0007】
さらに、光電変換素子列の出力から得られるA像信号、B像信号のアンバランス状態を検出し、焦点検出光学系のFナンバーを切り替えることで、正確な焦点検出を実現する焦点検出装置が特公平7−62731号公報(特許文献3)に開示されている。この焦点検出装置は、Fナンバーが異なる二つの焦点検出部を有する。A像信号、B像信号の一致度が高い場合には、多くの光束を受光するFナンバーが小さい焦点検出部で焦点検出を行い、A像信号、B像信号の一致度が低い場合には、焦点検出光束にケラレが生じにくいFナンバーが大きい焦点検出部で焦点検出を行う。
【0008】
また、レンズ情報と撮像面上の位置に基づいて画素信号のゲイン制御を行う画像取り込み装置が特開2000−324505号公報(特許文献4)に開示されている。撮像面中心から画素までの距離をLとしたときに、Lの多項式で任意位置における画素のゲイン制御量を算出する。この際、多項式の係数はレンズ射出瞳位置を含むレンズ情報に対応して格納されたデータテーブルに基づいて決定される。
【0009】
【特許文献1】
特開昭58−24105号公報
【特許文献2】
特開2001−124984号公報
【特許文献3】
特公平7−62731号公報
【特許文献4】
特開2000−324505号公報
【発明が解決しようとする課題】
しかしながら、特公平7−62731号公報に開示されている焦点検出装置において、光電変換セルの出力から得られるA像信号、B像信号のアンバランス状態を検出するためには、一度相関演算処理を行う必要がある。そのため、処理速度の速い計算機を搭載し焦点検出装置がコストアップしてしまうか、もしくは処理速度の速くない計算機を搭載したために高速な焦点検出が実現できないかのどちらかとなるという問題がある。また、焦点検出領域によっては、Fナンバーが小さい光束で焦点検出が行えないという問題もある。
【0010】
特開2000−324505号公報に開示されている画像取り込み装置では、撮像面中心から画素までの距離をLとしたときに、Lの多項式で任意位置における画素のゲイン制御量を算出するのである。この技術を先の特開2001−124984号公報に開示されている焦点検出装置に適応した場合、すなわち、第1の像信号と第2の像信号それぞれについてLの多項式でゲイン制御した際には、求めるゲイン制御量をLの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。そのため、処理速度の速い計算機を搭載し焦点検出装置がコストアップしてしまうか、もしくは処理速度の速くない計算機を搭載したために高速な焦点検出が実現できないかのどちらかとなるという問題がある。
【0011】
従って、本発明は上述した課題に鑑みてなされたものであり、その目的は、撮影光学系の口径食によって制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正できるようにすることである。
【0012】
また、本発明の他の目的は、焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されないようにすることである。
【0013】
【課題を解決するための手段】
上述した課題を解決し、目的を達成するために、本発明に係わる焦点検出装置は、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する演算手段とを具備することを特徴としている。
【0014】
【発明の実施の形態】
以下、本発明の好適な実施形態について、添付図面を参照して詳細に説明する。
【0015】
なお、本発明は、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する演算部とを具備する焦点検出装置として実施可能である。
【0016】
また、撮影光学系の射出瞳の第1の領域を通過する第1の光束を第1の光電変換素子列で光電変換するとともに、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を第2の光電変換素子列で光電変換し、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する焦点検出方法として実施可能である。
【0017】
図1は本発明の実施形態に係わる焦点検出装置を具備するデジタルスチルカメラの構成図、図2は実施形態におけるメージセンサの構成と撮影レンズとの関係を示す図、図15はデジタルスチルカメラの動作説明フローチャート、図16は焦点検出サブルーチンの動作フローチャート、図17は第1の実施形態におけるシェーディング補正サブルーチンの動作フローチャート、図18は第2の実施形態におけるシェーディング補正サブルーチンの動作フローチャートである。
【0018】
図1において、1はデジタルスチルカメラ本体であり、10は撮像装置(以下イメージセンサと称す)で、デジタルスチルカメラ1の撮影レンズ5の予定結像面に配置されている。デジタルスチルカメラ1には、カメラ全体を制御するCPU20、イメージセンサ10を駆動制御するイメージセンサ制御回路21、イメージセンサ10にて撮像した画像信号を画像処理する画像処理回路24、撮像された画像を表示するための液晶表示素子9とそれを駆動する液晶表示素子駆動回路25、液晶表示素子9に表示された被写体像を観察するための接眼レンズ3、イメージセンサ10にて撮像された画像を記録するメモリ回路22、画像処理回路24にて画像処理された画像をカメラ外部に出力するためのインターフェース回路23、撮影者が撮影された画像を記録するための操作スイッチSW2とを備えて構成されている。
【0019】
本実施形態の焦点検出装置は、CPU20とイメージセンサ10から構成されている。
【0020】
撮影レンズ5はデジタルカメラ1に取り付けられる交換レンズである。撮影レンズ5は、便宜上2枚のレンズ5a、5bで図示しているが、実際は多数枚のレンズで構成され、CPU20から送られてくるレンズ駆動量に基づいて撮影レンズ駆動機構26によって合焦状態に調節される。また30は絞り装置で、絞り駆動機構27によって所定の絞り値に絞り込まれるようになっている。31は撮影レンズメモリ回路であり、撮影レンズ固有の情報を記録している。レンズ駆動回路26、絞り駆動機構27、撮影レンズメモリ回路31は、デジタルスチルカメラ1との取り付け部に設けられた通信端子を通して、デジタルスチルカメラ1のCPU20と通信可能となっている。
【0021】
イメージセンサ10は図2に示すような構成になっている。図2は図1の矢印C方向から見た図である。イメージセンサ10は撮影レンズ5の予定結像面に配置されている。また、イメージセンサ10の1画素は2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0022】
ここで、光電変換素子13αは主に撮影レンズ5の瞳の図中上方を透過する光束を受光し、光電変換素子13βは主に撮影レンズ5の瞳の図中下方を透過する光束を受光する。
【0023】
図3はイメージセンサ10から見た撮影レンズの瞳40を示した図である。光電変換素子13αが受光する光束は撮影レンズの或る瞳領域41aを通過し、光電変換素子13βが受光する光束は瞳領域41aとは異なる領域41bを通過する。焦点検出時は、各光電変換素子からの出力をそれぞれ読み出し、さらに複数の画素からの出力より撮影レンズの異なる瞳位置を透過した光束による像信号が生成される。瞳領域41aを通過した光束による像信号をA像信号とし、瞳領域41bを通過した光束による像信号をB像信号とすると、A像信号、B像信号を用いて焦点検出を行う。つまり本実施形態の焦点検出装置におけるイメージセンサ10は、撮像機能と焦点検出機能の両者を持ち合わせており、焦点検出を行う画素で撮像も行う。
【0024】
次に、図15に従って本実施形態のカメラの動作フローを説明する。
【0025】
撮影者が、図1には不図示のデジタルスチルカメラ1のメインスイッチをONすると(S102)、CPU20は撮影レンズ5の焦点検出を実行する(S201)。焦点検出S201では、撮影レンズ5のデフォーカス量が算出され、得られたデフォーカス量を用いて撮影レンズの駆動量が算出される。焦点検出S201において算出された撮影レンズの駆動量に基づいて、CPU20は撮影レンズ駆動機構26にレンズ駆動信号を送り、撮影レンズを駆動して合焦状態に設定する(S103)。レンズ駆動S103が完了すると、カメラ1のCPU20はイメージセンサ制御回路21に撮像信号を送ってイメージセンサ10にて撮像を行わせる(S104)。イメージセンサ10にて撮像された画像信号は、イメージセンサ制御回路21にてA/D変換された後に画像処理回路24にて画像処理が行われる。画像処理が行われた画像信号はCPU20を介して液晶表示素子駆動回路25に送られ液晶表示素子9に表示される(S105)。撮影者は接眼レンズ3を通して液晶表示素子9に表示された被写体像を観察することが可能となる。さらにCPU20は撮像画像を記録するための操作スイッチSW2の状態を確認する(S106)。撮影者が操作スイッチSW2を操作していなければ(S106)、引き続きCPU20はメインスイッチの状態を確認する(S102)。
【0026】
一方、撮影者が被写体を撮影しようとして操作スイッチSW2を押したならば(S106)、CPU20はメージセンサ制御回路21に撮像信号を送ってイメージセンサ10にて本撮像を行う(S107)。
【0027】
イメージセンサ制御回路21によってA/D変換された画像信号は、画像処理回路24にて画像処理された後、液晶表示素子駆動回路25に送られ液晶表示素子9に表示される(S108)。
【0028】
同時に、CPU20は撮像された画像信号をそのままカメラ1のメモリ回路22に記憶する(S109)。撮影動作が終了し、撮影者がメインスイッチをOFFすると(S102)カメラの電源が落ちて待機状態となる(S110)。
【0029】
焦点検出サブルーチン(S201)の動作フローを図16に示す。
【0030】
カメラ本体1のCPU20は、焦点検出が実行されるとイメージセンサ制御回路21に焦点検出のための撮像開始信号を送ってイメージセンサ10にて焦点検出光束の撮像を行わせる(S202)。CPU20は同一色相の出力信号より、撮影レンズ5の瞳領域40(図3)におけるある領域41aを透過した焦点検出光束によりA像信号を生成し、同様に撮影レンズ5の瞳領域40における41aとは異なるある領域41bを透過した焦点検出光束によりB像信号を生成する。撮影(S202)において生成されるA像信号、B像信号にシェーディング補正を行ない、撮影光学系の口径食によって制限された場合にA像信号、B像信号に生じるアンバランスを補正する(S301)。シェーディング補正(S301)で一致度が向上したA像信号、B像信号を用いて相関演算を行い、二つの像信号のずれ量から撮影レンズ5のデフォーカス量が算出される(S203)。デフォーカス量算出(S203)で算出されたデフォーカス量に基づいて、撮影レンズの駆動量が算出される(S204)。撮影レンズの駆動量が算出されると(S204)、CPU20はメインルーチンへリターンする(S205)。
【0031】
第1の実施形態におけるシェーディング補正サブルーチン(S301)の動作フローを図17に示す。
【0032】
カメラ本体1のCPU20は、シェーディング補正(S301)が実行されると、撮影レンズメモリ回路31から撮影レンズの固有情報を読み込む(S302)。この撮影レンズ固有情報には、撮影レンズのFナンバー情報や撮影レンズ射出窓位置、射出窓半径などが含まれている。次にCPU20は、焦点検出領域入力手段や、視線入力手段などによって決定された焦点検出領域を読み込む(S303)。レンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるためにA像信号、B像信号に生じる強度比を算出する(S304)。強度比算出(S304)で得られた、A像信号、B像信号の強度比に基づいて、シェーディングデータを作成する(S306)。このシェーディングデータは、均一輝度被写体に対して焦点検出のための撮像(S202)を行った際に得られるべきA像信号、B像信号である。シェーディング補正(S301)では、均一輝度被写体に対して得られたA像信号、B像信号が、図7上段左に示すように焦点検出領域内の全ての画素においてA像信号、B像信号からの出力が均一になるようにすることが目的である。そこでシェーディング波形作成(S306)で得られたシェーディング波形に基づいて、焦点検出のための撮像(S202)で得られたA像信号、B像信号の補正を行ない(S307)、焦点検出サブルーチンへリターンする(S308)。
【0033】
デフォーカス量算出(S203)における相関演算処理について説明する。シェーディング補正(S301)後に、図4におけるA像信号、B像信号のような二つの像信号が得られたとすると、生成した二つの像信号の位相差は撮影レンズの結像状態(合焦状態、前ピン状態、後ピン状態)により変化する。撮影レンズが合焦状態においては二つの像信号の位相差は無くなり、前ピン状態と後ピン状態では異なる方向の位相差が生じる。さらにこの二つの像信号の位相差は撮影レンズのデフォーカス量と一定の関係がある。ここでデフォーカス量とは撮影レンズにより被写体像が結像している位置とマイクロレンズ上面との距離である。この二つの像信号の位相差から撮影レンズのデフォーカス量を求め、撮影レンズが合焦状態になるようなレンズ駆動量を算出することで焦点検出を行う。
【0034】
二つの像信号の位相差は、二つの像信号の相関を取ることで求める。相関の取り方は“MINアルゴリズム”と呼ばれるもので、A像信号の出力データをa[1]〜a[n]とし、B像信号の出力データをb[1]〜b[n]とすると、相関量U0は、
【0035】
【数1】
となる。ここでmin(a,b)はa,bの小さい方の値のことである。まずこのU0を計算する。次に図4に示すように、A像信号を信号電圧の1ビットシフトしたデータとB像信号のデータの相関量U1を計算する。このU1は
【0036】
【数2】
となる。このように1ビットずつシフトした相関量を次々に計算する。二つの像信号が一致していればこの相関量は最大値をとるので、その最大値をとるシフト量を求め、その前後のデータから相関量の真の最大値を補間して求め、そのシフト量を二つの像信号の位相差とする。この二つの像信号の位相差から撮影レンズのデフォーカス量を求め、撮影レンズが合焦状態になるようなレンズ駆動量を算出することで焦点検出を行う。
【0037】
次にシェーディング補正サブルーチン(S301)について説明する。
【0038】
イメージセンサ10の瞳領域(以下AF瞳領域40と称す)が撮影光学系の瞳領域より大きい場合や、焦点検出領域の中心が撮影レンズの光軸とイメージセンサ10の交点とは異なる場合、焦点検出に用いる光束が撮影光学系の口径食によって制限されてA像信号、B像信号にアンバランスが生じる恐れがある。A像信号、B像信号のアンバランスがある場合、デフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が低くなり、算出された位相差に誤差が生じる。また、このA像信号、B像信号のアンバランスが大きくなると相関演算自体が行えない恐れもある。そこで、この焦点検出に用いるA像信号、B像信号のアンバランスを補正することがシェーディング補正サブルーチン(S301)の目的である。
【0039】
図5は撮影光学系の口径食によって焦点検出に用いる光束が制限される様子を示している。撮影レンズ5は実際には複数枚のレンズで構成されており、撮影レンズの光軸とイメージセンサ10の交点以外に位置する画素73(以下、周辺画素73と称す)は、複数枚あるレンズのうち最もイメージセンサ10に近い側にあるレンズのレンズ保持枠と、最も被写体に近い側にあるレンズのレンズ保持枠によって光束が制限される。最もイメージセンサ10に近い側にあるレンズのレンズ保持枠を撮影レンズの射出窓1(図5、71)とし、最も被写体に近い側にあるレンズのレンズ保持枠を撮影レンズの射出窓2(図5、72)として、周辺画素73が受光する焦点検出用光束が射出窓1と射出窓2によって制限される様子が図5に斜視図で示されている。図5において、撮影レンズの光軸をx方向、イメージセンサ10の長辺方向をy方向、そしてイメージセンサ10の短辺方向をz方向と定義する。
【0040】
投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。周辺画素73は、投影射出窓71−1と投影射出窓72−1によって切り出される焦点検出開口瞳76を通過した光束を受光する。周辺画素73は、図2に示すように2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0041】
さらに、周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置することで、光電変換素子13αが受光する光束が通過する領域74a(以下、A像瞳領域74aとする)と光電変換素子13βが受光する光束が通過する領域74b(以下、B像瞳領域74bとする)の境界線が、撮影レンズの光軸を通過するようにしている。そのため、A像瞳領域74aとB像瞳領域74bは形状が境界線に対して線対称な形状とはならず、面積も異なる。瞳領域の面積は受光する光束の広がりを決めるものであるため、周辺画素73の光電変換素子13αと光電変換素子13βの受光強度は異なってくる。そのため焦点検出領域を、周辺画素73を含み光電変換素子の分割方向に並ぶ画素列とした場合、焦点検出領域から得られるA像信号、B像信号は強度差をもったものとなってしまう。
【0042】
A像信号、B像信号間にこのようなアンバランスがある場合、デフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が低くなり、算出された位相差に誤差が生じる。また、このA像信号、B像信号のアンバランスが大きくなると相関演算自体が行えない恐れもある。
【0043】
図6(a)は図5のx方向から見たAF瞳領域を示しており、図6(b)は図5のz方向から描いたものである。図6(a)において、投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。一点鎖線75の交点が撮影レンズの光軸である。AF瞳領域は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置されており、A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過している。そのため、A像瞳領域74aとB像瞳領域74bの面積は異なる。
【0044】
図6(b)において、71は射出窓1、72は射出窓2である。L71はイメージセンサ10から射出窓1(71)までの距離、L72はイメージセンサ10から射出窓2(72)までの距離である。D71は射出窓1(71)の直径、D72は射出窓2(72)の直径である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。周辺画素73は、投影射出窓71−1と投影射出窓72−1によって切り出される焦点検出開口瞳76を通過した光束を受光する。A像瞳領域74aとB像瞳領域74bの境界線は、AF瞳位置40において撮影レンズの光軸を通過するように、周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置されている。
【0045】
以上のように、焦点検出用の光束は撮影レンズの射出窓により制限され、A像信号、B像信号にアンバランスが生じる。図7(a)はAF瞳領域40が撮影レンズ5の瞳に対して十分に小さく、焦点検出領域の中心が光軸付近にあり、焦点検出領域の全画素にケラレが生じない場合に、一様輝度の被写体に対して得られるA像信号、B像信号である。焦点検出領域が光軸付近にあるため、撮影レンズの周辺光量落ちの影響もほとんどなく、A像信号、B像信号はともに或る一定の値となる。そのため、或る被写体を撮像した場合も、得られるA像信号、B像信号は図7(d)に示すように同じ形状となる。
【0046】
しかしAF瞳領域が撮影レンズの瞳より大きい場合には、光軸上以外の画素は前述のような撮影レンズの射出窓によりケラレが生じる。そのため、焦点検出領域が光軸付近にある場合でも、得られるA像信号、B像信号は図7(b)に示すような傾きを持ったものとなる。A像信号の傾きとB像信号の傾きは向きが逆になる。これは光軸上の画素では撮影レンズの射出窓によりケラレが生じず、A像信号とB像信号は同じ出力を得るが、光軸上以外の画素は撮影レンズの射出窓によりケラレが生じ、A像瞳領域74aとB像瞳領域74bの面積は異なるものとなり、強度差を生じるためである。光軸から光電変換素子13αの側(+y方向)に存在する画素ではA像瞳領域の方がB像瞳領域に比べて面積が大きくなり、光軸から光電変換素子13βの側(−y方向)に存在する画素ではB像瞳領域の方がA像瞳領域に比べて面積が大きくなる。そのため得られるA像信号、B像信号はそれぞれ逆向きの傾きを持ち、光軸上の画素を中心にクロスしたような形になる。そのため図7(d)と同じ被写体を撮像した場合にも、図7(e)に示すように、A像信号は右側画素になるしたがって出力が小さくなり、B像信号は左側画素になるにしたがって出力が小さくなる。つまりA像信号、B像信号では異なる形状となってしまう。そのためデフォーカス量算出(S203)において行われる相関演算におけるA像信号、B像信号の一致度が低くなり、算出された位相差に誤差が生じる。
【0047】
図7(c)は、焦点検出領域の中心が光軸から離れた位置にある場合に、一様輝度の被写体に対して得られるA像信号、B像信号である。そのような焦点検出領域では、焦点検出領域の中心位置付近の画素においても撮影レンズの射出窓によりケラレが生じ、A像瞳領域74aとB像瞳領域74bの面積は異なるものとなり、強度差を生じる。焦点検出領域の中心位置付近の画素が、光軸から光電変換素子13βの側(−y方向)に存在する場合には、B像瞳領域の方がA像瞳領域に比べて面積が大きくなる。そしてA像信号、B像信号の強度が等しくなる画素は中心以外の画素となる。つまり得られるA像信号、B像信号は傾きをもち、さらに強度差をもったものとなる。そのため図7(d)と同じ被写体を撮像した場合にも、図7(f)に示すように、A像信号は右側画素になるしたがって出力が小さくなり、B像信号は左側画素になるにしたがって出力が小さくなり、さらにA像信号全体の出力自体が小さくなる。つまりA像信号、B像信号では異なる形状となってしまう。そのためデフォーカス量算出(S203)において行われる相関演算におけるA像信号、B像信号の一致度が低くなり、算出された位相差に誤差が生じる。
【0048】
そこで、シェーディング補正を行ない、A像信号、B像信号のアンバランスを補正する。シェーディング補正では撮影レンズ射出窓情報と焦点検出領域情報を用いて、図7(b)と図7(c)に示すようなA像信号、B像信号の傾きや強度差を補正する。
【0049】
図8は図7(e)のような波形をシェーディング補正している様子を示している。撮影レンズ射出窓位置、射出窓半径と焦点検出領域情報を用いて、一様輝度の被写体に対して得られると予想されるA像信号、B像信号(シェーディングデータ)を算出する(図8(a))。次に図8(a)のA像信号、B像信号が或る一定の値になるように、焦点検出領域の各画素にそれぞれ重み付け係数を算出する。ここで、A像信号、B像信号をそれぞれ直線近似し、A像信号近似直線とB像信号近似直線の交点出力値をQとし、算出されるA像信号の出力データをAs[1]〜As[n]とし、B像信号の出力データをBs[1]〜Bs[n]とすると、A像信号に対する重み付け関数をPa[1]〜Pa[n]、B像信号に対する重み付け関数をPb[1]〜Pb[n]は以下のように表される。
【0050】
【数3】
得られた重み付け係数を実際に得られたA像信号、B像信号(図8(c))の各画素にかけて、補正後のA像信号、B像信号(図8(d))を得る。実際に得られたA像信号の出力データをAr[1]〜Ar[n]とし、B像信号の出力データをBr[1]〜Br[n]とすると、シェーディング補正後のA像信号の出力データAp[1]〜Ap[n]と、B像信号の出力データBp[1]〜Bp[n]は以下のように表される。
【0051】
【数4】
今、均一輝度の被写体に対して得られるA像信号、B像信号のシェーディング補正後のデータをAp0[1]〜Ap0[n]、Bp0[1]〜Bp0[n]とすると、式(7)に示すように各画素におけるA像信号、B像信号の出力が等しくなり、強度差が補正されている。
【0052】
【数5】
図9は図7(f)のような波形をシェーディング補正している様子を示している。図9においても上記と同様な方法によりシェーディング補正を行う。均一輝度の被写体に対して得られるシェーディング補正後のA像信号とB像信号は等しくなり、強度差が補正されている。
【0053】
以上のように、撮影レンズ射出窓情報と焦点検出領域情報に基づいてシェーディングデータが得られれば、A像信号、B像信号間に生じるアンバランスを補正することがきる。それによりデフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が向上し、算出された位相差の精度が上がる。
【0054】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、シェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0055】
第1の実施形態では、撮影レンズの射出窓情報と焦点検出領域情報を用いて算出されるシェーディングデータAs[1]〜As[n]、Bs[1]〜Bs[n]は、A像信号、B像信号の強度比rから求められる。焦点検出装置のコストダウンと高速な焦点検出を実現するためには、シェーディングデータの算出は演算負荷の軽いことが求められる。そこで第1の実施形態では、シェーディングデータに用いるA像信号、B像信号の強度比rの算出を、撮影レンズ射出窓情報と焦点検出領域情報から決まるパラメータの1次式で簡易的に求めることを特徴としている。
【0056】
まずシェーディングデータを算出する際に用いるA像信号、B像信号の強度比rの算出について説明する。
【0057】
図10は図5のx方向から見たAF瞳領域40を示している。一点鎖線75の交点は撮影レンズの光軸である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。AF瞳領域40は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。
【0058】
A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過しているため、A像瞳領域74aとB像瞳領域74bの面積は異なる。A像信号、B像信号の強度差はこの面積比によって決まる。そしてこの面積比は、切り出された焦点検出開口瞳76において、A像瞳領域74aとB像瞳領域74bの境界線がどの辺りに位置するかに、ほぼ一致する。ここで、投影射出窓71−1の光軸に対するシフト量をShift1、投影射出窓72−1の光軸に対するシフト量をShift2とし、焦点検出開口瞳76の中心の光軸に対するシフト量をtとすると、tは以下のように表される。
【0059】
【数6】
次に図6(b)に基づいて、投影射出窓71−1の直径D71_1と、投影射出窓72−1の直径D72_1を求める。
【0060】
【数7】
すると、図10における焦点検出開口瞳76の幅Tは以下のように表される。
【0061】
【数8】
式(10)、(13)で求められたt,Tを用いて表されるパラメータt/Tは、切り出された焦点検出開口瞳76において、A像瞳領域74aとB像瞳領域74bの境界線がどの辺りに位置するかに、ほぼ一致する。そこで、複数の撮影レンズの射出窓情報と複数の周辺画素73の位置との組み合わせから得られるt/Tと、一様輝度の被写体に対して得られる周辺画素73でのA像信号、B像信号強度比rの対数rをプロットしていくと、図11のようになる。横軸はt/T、縦軸はrである。するとt/Tとrは、1次式の関係が成り立っている。
【0062】
【数9】
つまりt/Tの1次式で簡易的に強度比rの対数rの算出が可能であることが分かる。この係数C1はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20が強度比の対数rを算出する際には、メモリ回路22から読み込んでくる。
【0063】
従来技術では、A像信号、B像信号の強度比rを、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比rが簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0064】
上記で算出されたA像信号、B像信号強度比rから、シェーディングデータを算出する。焦点検出領域の両端と中央の3点の画素においてA像信号、B像信号強度比rを算出し、r121,r122,r123とする。A像信号、B像信号強度比rを算出する画素は2つ以上であるなら、いくつでも構わない。
【0065】
A像信号、B像信号の強度比rを算出した画素において、それぞれA像信号出力とB像信号出力を算出する。A像信号、B像信号強度比rを算出した画素におけるA像信号出力をAd121,Ad122,Ad123とし、B像信号出力をBd121,Bd122,Bd123とすると、A像信号、B像信号の強度比rから、下記のように求められる。
【0066】
【数10】
これら(Ad121,Ad122,Ad123)と(Bd121,Bd122,Bd123)を図12に示すようにそれぞれ直線近似することで、A像信号シェーディングデータAs[1]〜As[n]とB像信号シェーディングデータBs[1]〜Bs[n]を得る。
【0067】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、上述のシェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0068】
第2の実施形態では、第1の実施形態において算出されるシェーディングデータをさらに精度良く求める方法を提案する。
【0069】
第2の実施形態では、シェーディングデータAs[1]〜As[n]、Bs[1]〜Bs[n]は、撮影レンズの射出窓情報と焦点検出領域情報を用いて算出されるA像信号、B像信号の強度比と、A像信号、B像信号の焦点検出領域内における強度分布の、2つのパラメータから求められる。焦点検出装置のコストダウンと高速な焦点検出を実現するためには、シェーディングデータの算出は演算負荷の軽いことが求められる。そこで第2の実施形態では、シェーディングデータに用いるA像信号、B像信号の強度比と強度分布の算出を、撮影レンズ射出窓情報と焦点検出領域情報から決まるパラメータの1次式で簡易的に求めることを特徴としている。
【0070】
第2の実施形態におけるシェーディング補正サブルーチン(S301)の動作フローを図18に示す。カメラ本体1のCPU20は、シェーディング補正(S301)が実行されると、撮影レンズメモリ回路31から撮影レンズの固有情報を読み込む(S302)。この撮影レンズ固有情報には、撮影レンズのFナンバー情報や撮影レンズ射出窓位置、射出窓半径などが含まれている。次にCPU20は、焦点検出領域入力手段や、視線入力手段などによって決定された焦点検出領域を読み込む(S303)。レンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるためにA像信号、B像信号に生じる強度比を算出する(S304)。さらにレンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるために焦点検出領域内の画素間でA像信号、B像信号に生じる強度変化、つまり強度分布を算出する(S305)。強度分布算出(S305)では、A像信号、B像信号のうち、どちらか一方の強度分布だけを算出する(S305)。強度比算出(S304)と強度分布算出(S305)で得られた、A像信号、B像信号の強度比と強度分布に基づいて、シェーディングデータを作成する(S306)。このシェーディングデータは、均一輝度被写体に対して焦点検出のための撮像(S202)を行った際に得られるべきA像信号、B像信号である。シェーディング補正(S301)では、均一輝度被写体に対して得られたA像信号、B像信号が、図7(a)に示すように焦点検出領域内の全ての画素においてA像信号、B像信号からの出力が均一になるようにすることが目的である。そこでシェーディング波形作成(S306)で得られたシェーディング波形に基づいて、焦点検出のための撮像(S202)で得られたA像信号、B像信号の補正を行ない(S307)、焦点検出サブルーチンへリターンする(S308)。
【0071】
A像信号、B像信号の強度比算出は、第1の実施形態と同様の手法で求められる。図10に示すように、焦点検出開口瞳76の中心の光軸に対するシフト量をtとし、焦点検出開口瞳76の幅をTとしたときに、この撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比が簡易的に求められる。
【0072】
【数11】
この係数C1はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20が強度比の対数rを算出する際には、メモリ回路22から読み込んでくる。
【0073】
従来技術では、A像信号、B像信号の強度比を、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比が簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0074】
次にシェーディングデータを算出する際に用いるA像信号、B像信号の強度分布算出について説明する。A像信号、B像信号の強度分布算出では、A像信号とB像信号どちらか一方の強度分布を求める。求める強度分布はA像信号とB像信号、どちらでも構わない。ここでは、A像信号の強度分布を求めていくことにする。
【0075】
図13は図5のx方向から見たAF瞳領域40を示している。一点鎖線75の交点は撮影レンズの光軸である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。AF瞳領域は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。
【0076】
A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過している。A像信号の強度分布はA像瞳領域74aの面積に比例する。このA像瞳領域74aの面積は、A像瞳領域74aの幅Taにほぼ比例する。Taは以下のように表される。
【0077】
【数12】
そこで、複数の撮影レンズの射出窓情報と複数の周辺画素73の位置との組み合わせから得られるTaと、一様輝度の被写体に対して得られる周辺画素73のA像信号出力Arをプロットしていくと、図14のようになる。横軸はTa、縦軸はA像信号出力Arである。するとTaとArは、1次式の関係が成り立っている。
【0078】
【数13】
つまりTaの1次式で簡易的にA像信号出力Arの算出が可能であることが分かる。この係数C2はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20がA像信号出力Arを算出する際には、メモリ回路22から読み込んでくる。
【0079】
図12は、上記Taから算出されたA像信号出力を用いて、A像信号強度分布を算出する過程を示している。ここで、図12に示すように、焦点検出領域の両端と中央の3点の画素においてA像信号出力を算出し、Ad121,Ad122,Ad123とする。A像信号出力を算出する画素は2つ以上であるなら、いくつでも構わない。これらAd121,Ad122,Ad123をA像信号の強度分布とする。
【0080】
従来技術では、A像信号の強度分布を、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータTaの1次式でA像信号の強度分布が簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0081】
以上述べてきたA像信号、B像信号強度比とA像信号の強度分布から、シェーディングデータを算出する。A像信号強度分布を算出した画素において、それぞれA像信号、B像信号の強度比rを算出し、r121,r122,r123とする。算出方法は、先に述べたように撮影レンズ射出窓情報と周辺画素73の位置からパラメータt/Tを算出し、式(14)に基づいてA像信号、B像信号の強度比rを求める。A像信号強度分布を算出した画素におけるB像信号出力Bd121,Bd122,Bd123は、A像信号強度分布Ad121,Ad122,Ad123とA像信号、B像信号の強度比rから、下記のように求められる。
【0082】
【数14】
これら(Ad121,Ad122,Ad123)と(Bd121,Bd122,Bd123)を図12に示すようにそれぞれ直線近似することで、A像信号シェーディングデータAs[1]〜As[n]とB像信号シェーディングデータBs[1]〜Bs[n]を得る。
【0083】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、シェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0084】
以上説明したように、上記の実施形態によれば、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1光電変換素子列と前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2光電変換素子列よりなる固体撮像素子を有し、前記第1光電変換素子列からの像信号である第1の像信号と、前記第2光電変換素子列からの像信号である第2の像信号とで相関演算を行うことによって撮影光学系の焦点状態を検出する焦点検出装置において、焦点検出瞳領域が前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて前記第1光電変換素子と第2光電変換素子からの信号に生じる強度差を補正することで、次の効果が得られる。
(1)撮影光学系の口径食によって焦点検出用光束が制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正することが可能となる。
(2)焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されることがなくなる。
【0085】
また前記焦点検出装置において、所定の焦点検出領域内の少なくとも二つの焦点検出画素における強度差に基づいて、焦点検出領域内の全ての画素における前記第1光電変換素子と第2光電変換素子からの信号に生じる強度差を補正することで、次の効果が得られる。
(3)撮影光学系の口径食によって焦点検出用光束が制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、さらに少ない計算量で効率的に補正することが可能となる。
【0086】
【他の実施形態】
本発明は、複数の機器から構成されるシステムに適用しても良いし、また、単体の機器から成る装置に適用しても良いしLANなどのネットワークを介して処理が行われるシステムに適用しても良い。
【0087】
また、各実施形態の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体(または記録媒体)を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム(OS)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0088】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0089】
本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した手順に対応するプログラムコードが格納されることになる。
【0090】
【発明の効果】
以上説明したように、本発明によれば、撮影光学系の口径食によって制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正することができる。
【0091】
また、焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されないようにすることができる。
【図面の簡単な説明】
【図1】本発明の実施形態に係わるカメラとレンズの構成を示す図である。
【図2】イメージセンサの構成と撮影レンズとの関係を示す図である。
【図3】撮影レンズの瞳を示す図である。
【図4】相関演算処理の説明図である。
【図5】撮影レンズの射出窓によって焦点検出開口瞳が形成されている状態を示す斜視図である。
【図6】撮影レンズの射出窓によって焦点検出開口瞳が形成されている状態を示す図である。
【図7】一様輝度被写体のA像信号、B像信号((a)光軸上、(b)光軸上、(c)軸外)と一般的な被写体のA像信号、B像信号((a)光軸上、(b)光軸上、(c)軸外)を示す図である。
【図8】シェーディング補正(光軸上)を行っている状態を示す図である。
【図9】シェーディング補正(光軸外)を行っている状態を示す図である。
【図10】強度比r算出のためのパラメータt/Tを示す図である。
【図11】パラ−メータt/Tと強度比の対数rの関係を示す図である。
【図12】A像信号強度分布とB像信号強度分布からシェーディングデータを算出している状態を示す図である。
【図13】A像信号出力Ar算出のためのパラメータTaを示す図である。
【図14】パラメータTaとA像信号出力Arの関係を示す図である。
【図15】カメラの動作説明フローチャートである。
【図16】焦点検出サブルーチンの動作説明フローチャートである。
【図17】第1の実施形態におけるシェーディング補正サブルーチンの動作説明フローチャートである。
【図18】第2の実施形態におけるシェーディング補正サブルーチンの動作説明フローチャートである。
【発明の属する技術分野】
本発明は、撮影レンズの異なる瞳領域を通過した光束によって形成される2つの物体像の相対的位置関係より、撮影レンズの結像状態を検出する技術に関するものである。
【0002】
【従来の技術】
カメラの焦点検出方式にはいくつかの方法があるが、センサの各画素にマイクロレンズが形成された2次元の受光センサを用いて瞳分割方式の焦点検出を行う装置が特開昭58−24105号公報(特許文献1)に開示されている。
【0003】
図2は同公報で提案している瞳分割方式の焦点検出を行う方法の原理説明図である。
【0004】
イメージセンサ10は撮影レンズ5の予定結像面に配置されている。また、イメージセンサ10の1画素は2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0005】
ここで、光電変換素子13αは主に撮影レンズ5の瞳の図中上方を透過する光束を受光し、光電変換素子13βは主に撮影レンズ5の瞳の図中下方を透過する光束を受光する。焦点検出時は、各光電変換素子からの出力をそれぞれ読み出し、さらに複数の画素からの出力より撮影レンズの異なる瞳位置を透過した光束による像信号が生成される。
【0006】
また、本願出願人は瞳分割方式の焦点検出を行うことが可能な焦点検出装置を特開2001−124984号公報(特許文献2)に開示している。同公報の焦点検出装置は、一対の光電変換素子を、二次元に配置したマイクロレンズアレイごとに設け、このマイクロレンズより、光電変換素子を撮影光学系の瞳に投影することで、瞳を分割している。撮影光学系の瞳の異なる部分を通過した2光束の光電変換素子列の出力から得られる第1の像信号と第2の像信号(以下、A像信号、B像信号と称す)の位相差に基づいて撮影レンズの焦点状態を検出するものである。ここで、位相差とはA像信号、B像信号の相対的な位置関係のことである。
【0007】
さらに、光電変換素子列の出力から得られるA像信号、B像信号のアンバランス状態を検出し、焦点検出光学系のFナンバーを切り替えることで、正確な焦点検出を実現する焦点検出装置が特公平7−62731号公報(特許文献3)に開示されている。この焦点検出装置は、Fナンバーが異なる二つの焦点検出部を有する。A像信号、B像信号の一致度が高い場合には、多くの光束を受光するFナンバーが小さい焦点検出部で焦点検出を行い、A像信号、B像信号の一致度が低い場合には、焦点検出光束にケラレが生じにくいFナンバーが大きい焦点検出部で焦点検出を行う。
【0008】
また、レンズ情報と撮像面上の位置に基づいて画素信号のゲイン制御を行う画像取り込み装置が特開2000−324505号公報(特許文献4)に開示されている。撮像面中心から画素までの距離をLとしたときに、Lの多項式で任意位置における画素のゲイン制御量を算出する。この際、多項式の係数はレンズ射出瞳位置を含むレンズ情報に対応して格納されたデータテーブルに基づいて決定される。
【0009】
【特許文献1】
特開昭58−24105号公報
【特許文献2】
特開2001−124984号公報
【特許文献3】
特公平7−62731号公報
【特許文献4】
特開2000−324505号公報
【発明が解決しようとする課題】
しかしながら、特公平7−62731号公報に開示されている焦点検出装置において、光電変換セルの出力から得られるA像信号、B像信号のアンバランス状態を検出するためには、一度相関演算処理を行う必要がある。そのため、処理速度の速い計算機を搭載し焦点検出装置がコストアップしてしまうか、もしくは処理速度の速くない計算機を搭載したために高速な焦点検出が実現できないかのどちらかとなるという問題がある。また、焦点検出領域によっては、Fナンバーが小さい光束で焦点検出が行えないという問題もある。
【0010】
特開2000−324505号公報に開示されている画像取り込み装置では、撮像面中心から画素までの距離をLとしたときに、Lの多項式で任意位置における画素のゲイン制御量を算出するのである。この技術を先の特開2001−124984号公報に開示されている焦点検出装置に適応した場合、すなわち、第1の像信号と第2の像信号それぞれについてLの多項式でゲイン制御した際には、求めるゲイン制御量をLの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。そのため、処理速度の速い計算機を搭載し焦点検出装置がコストアップしてしまうか、もしくは処理速度の速くない計算機を搭載したために高速な焦点検出が実現できないかのどちらかとなるという問題がある。
【0011】
従って、本発明は上述した課題に鑑みてなされたものであり、その目的は、撮影光学系の口径食によって制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正できるようにすることである。
【0012】
また、本発明の他の目的は、焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されないようにすることである。
【0013】
【課題を解決するための手段】
上述した課題を解決し、目的を達成するために、本発明に係わる焦点検出装置は、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する演算手段とを具備することを特徴としている。
【0014】
【発明の実施の形態】
以下、本発明の好適な実施形態について、添付図面を参照して詳細に説明する。
【0015】
なお、本発明は、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する演算部とを具備する焦点検出装置として実施可能である。
【0016】
また、撮影光学系の射出瞳の第1の領域を通過する第1の光束を第1の光電変換素子列で光電変換するとともに、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を第2の光電変換素子列で光電変換し、撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する焦点検出方法として実施可能である。
【0017】
図1は本発明の実施形態に係わる焦点検出装置を具備するデジタルスチルカメラの構成図、図2は実施形態におけるメージセンサの構成と撮影レンズとの関係を示す図、図15はデジタルスチルカメラの動作説明フローチャート、図16は焦点検出サブルーチンの動作フローチャート、図17は第1の実施形態におけるシェーディング補正サブルーチンの動作フローチャート、図18は第2の実施形態におけるシェーディング補正サブルーチンの動作フローチャートである。
【0018】
図1において、1はデジタルスチルカメラ本体であり、10は撮像装置(以下イメージセンサと称す)で、デジタルスチルカメラ1の撮影レンズ5の予定結像面に配置されている。デジタルスチルカメラ1には、カメラ全体を制御するCPU20、イメージセンサ10を駆動制御するイメージセンサ制御回路21、イメージセンサ10にて撮像した画像信号を画像処理する画像処理回路24、撮像された画像を表示するための液晶表示素子9とそれを駆動する液晶表示素子駆動回路25、液晶表示素子9に表示された被写体像を観察するための接眼レンズ3、イメージセンサ10にて撮像された画像を記録するメモリ回路22、画像処理回路24にて画像処理された画像をカメラ外部に出力するためのインターフェース回路23、撮影者が撮影された画像を記録するための操作スイッチSW2とを備えて構成されている。
【0019】
本実施形態の焦点検出装置は、CPU20とイメージセンサ10から構成されている。
【0020】
撮影レンズ5はデジタルカメラ1に取り付けられる交換レンズである。撮影レンズ5は、便宜上2枚のレンズ5a、5bで図示しているが、実際は多数枚のレンズで構成され、CPU20から送られてくるレンズ駆動量に基づいて撮影レンズ駆動機構26によって合焦状態に調節される。また30は絞り装置で、絞り駆動機構27によって所定の絞り値に絞り込まれるようになっている。31は撮影レンズメモリ回路であり、撮影レンズ固有の情報を記録している。レンズ駆動回路26、絞り駆動機構27、撮影レンズメモリ回路31は、デジタルスチルカメラ1との取り付け部に設けられた通信端子を通して、デジタルスチルカメラ1のCPU20と通信可能となっている。
【0021】
イメージセンサ10は図2に示すような構成になっている。図2は図1の矢印C方向から見た図である。イメージセンサ10は撮影レンズ5の予定結像面に配置されている。また、イメージセンサ10の1画素は2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0022】
ここで、光電変換素子13αは主に撮影レンズ5の瞳の図中上方を透過する光束を受光し、光電変換素子13βは主に撮影レンズ5の瞳の図中下方を透過する光束を受光する。
【0023】
図3はイメージセンサ10から見た撮影レンズの瞳40を示した図である。光電変換素子13αが受光する光束は撮影レンズの或る瞳領域41aを通過し、光電変換素子13βが受光する光束は瞳領域41aとは異なる領域41bを通過する。焦点検出時は、各光電変換素子からの出力をそれぞれ読み出し、さらに複数の画素からの出力より撮影レンズの異なる瞳位置を透過した光束による像信号が生成される。瞳領域41aを通過した光束による像信号をA像信号とし、瞳領域41bを通過した光束による像信号をB像信号とすると、A像信号、B像信号を用いて焦点検出を行う。つまり本実施形態の焦点検出装置におけるイメージセンサ10は、撮像機能と焦点検出機能の両者を持ち合わせており、焦点検出を行う画素で撮像も行う。
【0024】
次に、図15に従って本実施形態のカメラの動作フローを説明する。
【0025】
撮影者が、図1には不図示のデジタルスチルカメラ1のメインスイッチをONすると(S102)、CPU20は撮影レンズ5の焦点検出を実行する(S201)。焦点検出S201では、撮影レンズ5のデフォーカス量が算出され、得られたデフォーカス量を用いて撮影レンズの駆動量が算出される。焦点検出S201において算出された撮影レンズの駆動量に基づいて、CPU20は撮影レンズ駆動機構26にレンズ駆動信号を送り、撮影レンズを駆動して合焦状態に設定する(S103)。レンズ駆動S103が完了すると、カメラ1のCPU20はイメージセンサ制御回路21に撮像信号を送ってイメージセンサ10にて撮像を行わせる(S104)。イメージセンサ10にて撮像された画像信号は、イメージセンサ制御回路21にてA/D変換された後に画像処理回路24にて画像処理が行われる。画像処理が行われた画像信号はCPU20を介して液晶表示素子駆動回路25に送られ液晶表示素子9に表示される(S105)。撮影者は接眼レンズ3を通して液晶表示素子9に表示された被写体像を観察することが可能となる。さらにCPU20は撮像画像を記録するための操作スイッチSW2の状態を確認する(S106)。撮影者が操作スイッチSW2を操作していなければ(S106)、引き続きCPU20はメインスイッチの状態を確認する(S102)。
【0026】
一方、撮影者が被写体を撮影しようとして操作スイッチSW2を押したならば(S106)、CPU20はメージセンサ制御回路21に撮像信号を送ってイメージセンサ10にて本撮像を行う(S107)。
【0027】
イメージセンサ制御回路21によってA/D変換された画像信号は、画像処理回路24にて画像処理された後、液晶表示素子駆動回路25に送られ液晶表示素子9に表示される(S108)。
【0028】
同時に、CPU20は撮像された画像信号をそのままカメラ1のメモリ回路22に記憶する(S109)。撮影動作が終了し、撮影者がメインスイッチをOFFすると(S102)カメラの電源が落ちて待機状態となる(S110)。
【0029】
焦点検出サブルーチン(S201)の動作フローを図16に示す。
【0030】
カメラ本体1のCPU20は、焦点検出が実行されるとイメージセンサ制御回路21に焦点検出のための撮像開始信号を送ってイメージセンサ10にて焦点検出光束の撮像を行わせる(S202)。CPU20は同一色相の出力信号より、撮影レンズ5の瞳領域40(図3)におけるある領域41aを透過した焦点検出光束によりA像信号を生成し、同様に撮影レンズ5の瞳領域40における41aとは異なるある領域41bを透過した焦点検出光束によりB像信号を生成する。撮影(S202)において生成されるA像信号、B像信号にシェーディング補正を行ない、撮影光学系の口径食によって制限された場合にA像信号、B像信号に生じるアンバランスを補正する(S301)。シェーディング補正(S301)で一致度が向上したA像信号、B像信号を用いて相関演算を行い、二つの像信号のずれ量から撮影レンズ5のデフォーカス量が算出される(S203)。デフォーカス量算出(S203)で算出されたデフォーカス量に基づいて、撮影レンズの駆動量が算出される(S204)。撮影レンズの駆動量が算出されると(S204)、CPU20はメインルーチンへリターンする(S205)。
【0031】
第1の実施形態におけるシェーディング補正サブルーチン(S301)の動作フローを図17に示す。
【0032】
カメラ本体1のCPU20は、シェーディング補正(S301)が実行されると、撮影レンズメモリ回路31から撮影レンズの固有情報を読み込む(S302)。この撮影レンズ固有情報には、撮影レンズのFナンバー情報や撮影レンズ射出窓位置、射出窓半径などが含まれている。次にCPU20は、焦点検出領域入力手段や、視線入力手段などによって決定された焦点検出領域を読み込む(S303)。レンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるためにA像信号、B像信号に生じる強度比を算出する(S304)。強度比算出(S304)で得られた、A像信号、B像信号の強度比に基づいて、シェーディングデータを作成する(S306)。このシェーディングデータは、均一輝度被写体に対して焦点検出のための撮像(S202)を行った際に得られるべきA像信号、B像信号である。シェーディング補正(S301)では、均一輝度被写体に対して得られたA像信号、B像信号が、図7上段左に示すように焦点検出領域内の全ての画素においてA像信号、B像信号からの出力が均一になるようにすることが目的である。そこでシェーディング波形作成(S306)で得られたシェーディング波形に基づいて、焦点検出のための撮像(S202)で得られたA像信号、B像信号の補正を行ない(S307)、焦点検出サブルーチンへリターンする(S308)。
【0033】
デフォーカス量算出(S203)における相関演算処理について説明する。シェーディング補正(S301)後に、図4におけるA像信号、B像信号のような二つの像信号が得られたとすると、生成した二つの像信号の位相差は撮影レンズの結像状態(合焦状態、前ピン状態、後ピン状態)により変化する。撮影レンズが合焦状態においては二つの像信号の位相差は無くなり、前ピン状態と後ピン状態では異なる方向の位相差が生じる。さらにこの二つの像信号の位相差は撮影レンズのデフォーカス量と一定の関係がある。ここでデフォーカス量とは撮影レンズにより被写体像が結像している位置とマイクロレンズ上面との距離である。この二つの像信号の位相差から撮影レンズのデフォーカス量を求め、撮影レンズが合焦状態になるようなレンズ駆動量を算出することで焦点検出を行う。
【0034】
二つの像信号の位相差は、二つの像信号の相関を取ることで求める。相関の取り方は“MINアルゴリズム”と呼ばれるもので、A像信号の出力データをa[1]〜a[n]とし、B像信号の出力データをb[1]〜b[n]とすると、相関量U0は、
【0035】
【数1】
となる。ここでmin(a,b)はa,bの小さい方の値のことである。まずこのU0を計算する。次に図4に示すように、A像信号を信号電圧の1ビットシフトしたデータとB像信号のデータの相関量U1を計算する。このU1は
【0036】
【数2】
となる。このように1ビットずつシフトした相関量を次々に計算する。二つの像信号が一致していればこの相関量は最大値をとるので、その最大値をとるシフト量を求め、その前後のデータから相関量の真の最大値を補間して求め、そのシフト量を二つの像信号の位相差とする。この二つの像信号の位相差から撮影レンズのデフォーカス量を求め、撮影レンズが合焦状態になるようなレンズ駆動量を算出することで焦点検出を行う。
【0037】
次にシェーディング補正サブルーチン(S301)について説明する。
【0038】
イメージセンサ10の瞳領域(以下AF瞳領域40と称す)が撮影光学系の瞳領域より大きい場合や、焦点検出領域の中心が撮影レンズの光軸とイメージセンサ10の交点とは異なる場合、焦点検出に用いる光束が撮影光学系の口径食によって制限されてA像信号、B像信号にアンバランスが生じる恐れがある。A像信号、B像信号のアンバランスがある場合、デフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が低くなり、算出された位相差に誤差が生じる。また、このA像信号、B像信号のアンバランスが大きくなると相関演算自体が行えない恐れもある。そこで、この焦点検出に用いるA像信号、B像信号のアンバランスを補正することがシェーディング補正サブルーチン(S301)の目的である。
【0039】
図5は撮影光学系の口径食によって焦点検出に用いる光束が制限される様子を示している。撮影レンズ5は実際には複数枚のレンズで構成されており、撮影レンズの光軸とイメージセンサ10の交点以外に位置する画素73(以下、周辺画素73と称す)は、複数枚あるレンズのうち最もイメージセンサ10に近い側にあるレンズのレンズ保持枠と、最も被写体に近い側にあるレンズのレンズ保持枠によって光束が制限される。最もイメージセンサ10に近い側にあるレンズのレンズ保持枠を撮影レンズの射出窓1(図5、71)とし、最も被写体に近い側にあるレンズのレンズ保持枠を撮影レンズの射出窓2(図5、72)として、周辺画素73が受光する焦点検出用光束が射出窓1と射出窓2によって制限される様子が図5に斜視図で示されている。図5において、撮影レンズの光軸をx方向、イメージセンサ10の長辺方向をy方向、そしてイメージセンサ10の短辺方向をz方向と定義する。
【0040】
投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。周辺画素73は、投影射出窓71−1と投影射出窓72−1によって切り出される焦点検出開口瞳76を通過した光束を受光する。周辺画素73は、図2に示すように2つの光電変換素子13α、13βとから構成されており、各光電変換素子の撮影レンズ側に形成されたマイクロレンズ11によって光電変換素子13α、13βは撮影レンズ5の瞳の異なる位置を透過した光束を受光するように構成されている。
【0041】
さらに、周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置することで、光電変換素子13αが受光する光束が通過する領域74a(以下、A像瞳領域74aとする)と光電変換素子13βが受光する光束が通過する領域74b(以下、B像瞳領域74bとする)の境界線が、撮影レンズの光軸を通過するようにしている。そのため、A像瞳領域74aとB像瞳領域74bは形状が境界線に対して線対称な形状とはならず、面積も異なる。瞳領域の面積は受光する光束の広がりを決めるものであるため、周辺画素73の光電変換素子13αと光電変換素子13βの受光強度は異なってくる。そのため焦点検出領域を、周辺画素73を含み光電変換素子の分割方向に並ぶ画素列とした場合、焦点検出領域から得られるA像信号、B像信号は強度差をもったものとなってしまう。
【0042】
A像信号、B像信号間にこのようなアンバランスがある場合、デフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が低くなり、算出された位相差に誤差が生じる。また、このA像信号、B像信号のアンバランスが大きくなると相関演算自体が行えない恐れもある。
【0043】
図6(a)は図5のx方向から見たAF瞳領域を示しており、図6(b)は図5のz方向から描いたものである。図6(a)において、投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。一点鎖線75の交点が撮影レンズの光軸である。AF瞳領域は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置されており、A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過している。そのため、A像瞳領域74aとB像瞳領域74bの面積は異なる。
【0044】
図6(b)において、71は射出窓1、72は射出窓2である。L71はイメージセンサ10から射出窓1(71)までの距離、L72はイメージセンサ10から射出窓2(72)までの距離である。D71は射出窓1(71)の直径、D72は射出窓2(72)の直径である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。周辺画素73は、投影射出窓71−1と投影射出窓72−1によって切り出される焦点検出開口瞳76を通過した光束を受光する。A像瞳領域74aとB像瞳領域74bの境界線は、AF瞳位置40において撮影レンズの光軸を通過するように、周辺画素73のマイクロレンズ11は、2つの光電変換素子13α、13βに対して光軸方向にシフトした位置に配置されている。
【0045】
以上のように、焦点検出用の光束は撮影レンズの射出窓により制限され、A像信号、B像信号にアンバランスが生じる。図7(a)はAF瞳領域40が撮影レンズ5の瞳に対して十分に小さく、焦点検出領域の中心が光軸付近にあり、焦点検出領域の全画素にケラレが生じない場合に、一様輝度の被写体に対して得られるA像信号、B像信号である。焦点検出領域が光軸付近にあるため、撮影レンズの周辺光量落ちの影響もほとんどなく、A像信号、B像信号はともに或る一定の値となる。そのため、或る被写体を撮像した場合も、得られるA像信号、B像信号は図7(d)に示すように同じ形状となる。
【0046】
しかしAF瞳領域が撮影レンズの瞳より大きい場合には、光軸上以外の画素は前述のような撮影レンズの射出窓によりケラレが生じる。そのため、焦点検出領域が光軸付近にある場合でも、得られるA像信号、B像信号は図7(b)に示すような傾きを持ったものとなる。A像信号の傾きとB像信号の傾きは向きが逆になる。これは光軸上の画素では撮影レンズの射出窓によりケラレが生じず、A像信号とB像信号は同じ出力を得るが、光軸上以外の画素は撮影レンズの射出窓によりケラレが生じ、A像瞳領域74aとB像瞳領域74bの面積は異なるものとなり、強度差を生じるためである。光軸から光電変換素子13αの側(+y方向)に存在する画素ではA像瞳領域の方がB像瞳領域に比べて面積が大きくなり、光軸から光電変換素子13βの側(−y方向)に存在する画素ではB像瞳領域の方がA像瞳領域に比べて面積が大きくなる。そのため得られるA像信号、B像信号はそれぞれ逆向きの傾きを持ち、光軸上の画素を中心にクロスしたような形になる。そのため図7(d)と同じ被写体を撮像した場合にも、図7(e)に示すように、A像信号は右側画素になるしたがって出力が小さくなり、B像信号は左側画素になるにしたがって出力が小さくなる。つまりA像信号、B像信号では異なる形状となってしまう。そのためデフォーカス量算出(S203)において行われる相関演算におけるA像信号、B像信号の一致度が低くなり、算出された位相差に誤差が生じる。
【0047】
図7(c)は、焦点検出領域の中心が光軸から離れた位置にある場合に、一様輝度の被写体に対して得られるA像信号、B像信号である。そのような焦点検出領域では、焦点検出領域の中心位置付近の画素においても撮影レンズの射出窓によりケラレが生じ、A像瞳領域74aとB像瞳領域74bの面積は異なるものとなり、強度差を生じる。焦点検出領域の中心位置付近の画素が、光軸から光電変換素子13βの側(−y方向)に存在する場合には、B像瞳領域の方がA像瞳領域に比べて面積が大きくなる。そしてA像信号、B像信号の強度が等しくなる画素は中心以外の画素となる。つまり得られるA像信号、B像信号は傾きをもち、さらに強度差をもったものとなる。そのため図7(d)と同じ被写体を撮像した場合にも、図7(f)に示すように、A像信号は右側画素になるしたがって出力が小さくなり、B像信号は左側画素になるにしたがって出力が小さくなり、さらにA像信号全体の出力自体が小さくなる。つまりA像信号、B像信号では異なる形状となってしまう。そのためデフォーカス量算出(S203)において行われる相関演算におけるA像信号、B像信号の一致度が低くなり、算出された位相差に誤差が生じる。
【0048】
そこで、シェーディング補正を行ない、A像信号、B像信号のアンバランスを補正する。シェーディング補正では撮影レンズ射出窓情報と焦点検出領域情報を用いて、図7(b)と図7(c)に示すようなA像信号、B像信号の傾きや強度差を補正する。
【0049】
図8は図7(e)のような波形をシェーディング補正している様子を示している。撮影レンズ射出窓位置、射出窓半径と焦点検出領域情報を用いて、一様輝度の被写体に対して得られると予想されるA像信号、B像信号(シェーディングデータ)を算出する(図8(a))。次に図8(a)のA像信号、B像信号が或る一定の値になるように、焦点検出領域の各画素にそれぞれ重み付け係数を算出する。ここで、A像信号、B像信号をそれぞれ直線近似し、A像信号近似直線とB像信号近似直線の交点出力値をQとし、算出されるA像信号の出力データをAs[1]〜As[n]とし、B像信号の出力データをBs[1]〜Bs[n]とすると、A像信号に対する重み付け関数をPa[1]〜Pa[n]、B像信号に対する重み付け関数をPb[1]〜Pb[n]は以下のように表される。
【0050】
【数3】
得られた重み付け係数を実際に得られたA像信号、B像信号(図8(c))の各画素にかけて、補正後のA像信号、B像信号(図8(d))を得る。実際に得られたA像信号の出力データをAr[1]〜Ar[n]とし、B像信号の出力データをBr[1]〜Br[n]とすると、シェーディング補正後のA像信号の出力データAp[1]〜Ap[n]と、B像信号の出力データBp[1]〜Bp[n]は以下のように表される。
【0051】
【数4】
今、均一輝度の被写体に対して得られるA像信号、B像信号のシェーディング補正後のデータをAp0[1]〜Ap0[n]、Bp0[1]〜Bp0[n]とすると、式(7)に示すように各画素におけるA像信号、B像信号の出力が等しくなり、強度差が補正されている。
【0052】
【数5】
図9は図7(f)のような波形をシェーディング補正している様子を示している。図9においても上記と同様な方法によりシェーディング補正を行う。均一輝度の被写体に対して得られるシェーディング補正後のA像信号とB像信号は等しくなり、強度差が補正されている。
【0053】
以上のように、撮影レンズ射出窓情報と焦点検出領域情報に基づいてシェーディングデータが得られれば、A像信号、B像信号間に生じるアンバランスを補正することがきる。それによりデフォーカス量算出(S203)において行われる相関演算における二つの像信号の一致度が向上し、算出された位相差の精度が上がる。
【0054】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、シェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0055】
第1の実施形態では、撮影レンズの射出窓情報と焦点検出領域情報を用いて算出されるシェーディングデータAs[1]〜As[n]、Bs[1]〜Bs[n]は、A像信号、B像信号の強度比rから求められる。焦点検出装置のコストダウンと高速な焦点検出を実現するためには、シェーディングデータの算出は演算負荷の軽いことが求められる。そこで第1の実施形態では、シェーディングデータに用いるA像信号、B像信号の強度比rの算出を、撮影レンズ射出窓情報と焦点検出領域情報から決まるパラメータの1次式で簡易的に求めることを特徴としている。
【0056】
まずシェーディングデータを算出する際に用いるA像信号、B像信号の強度比rの算出について説明する。
【0057】
図10は図5のx方向から見たAF瞳領域40を示している。一点鎖線75の交点は撮影レンズの光軸である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。AF瞳領域40は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。
【0058】
A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過しているため、A像瞳領域74aとB像瞳領域74bの面積は異なる。A像信号、B像信号の強度差はこの面積比によって決まる。そしてこの面積比は、切り出された焦点検出開口瞳76において、A像瞳領域74aとB像瞳領域74bの境界線がどの辺りに位置するかに、ほぼ一致する。ここで、投影射出窓71−1の光軸に対するシフト量をShift1、投影射出窓72−1の光軸に対するシフト量をShift2とし、焦点検出開口瞳76の中心の光軸に対するシフト量をtとすると、tは以下のように表される。
【0059】
【数6】
次に図6(b)に基づいて、投影射出窓71−1の直径D71_1と、投影射出窓72−1の直径D72_1を求める。
【0060】
【数7】
すると、図10における焦点検出開口瞳76の幅Tは以下のように表される。
【0061】
【数8】
式(10)、(13)で求められたt,Tを用いて表されるパラメータt/Tは、切り出された焦点検出開口瞳76において、A像瞳領域74aとB像瞳領域74bの境界線がどの辺りに位置するかに、ほぼ一致する。そこで、複数の撮影レンズの射出窓情報と複数の周辺画素73の位置との組み合わせから得られるt/Tと、一様輝度の被写体に対して得られる周辺画素73でのA像信号、B像信号強度比rの対数rをプロットしていくと、図11のようになる。横軸はt/T、縦軸はrである。するとt/Tとrは、1次式の関係が成り立っている。
【0062】
【数9】
つまりt/Tの1次式で簡易的に強度比rの対数rの算出が可能であることが分かる。この係数C1はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20が強度比の対数rを算出する際には、メモリ回路22から読み込んでくる。
【0063】
従来技術では、A像信号、B像信号の強度比rを、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比rが簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0064】
上記で算出されたA像信号、B像信号強度比rから、シェーディングデータを算出する。焦点検出領域の両端と中央の3点の画素においてA像信号、B像信号強度比rを算出し、r121,r122,r123とする。A像信号、B像信号強度比rを算出する画素は2つ以上であるなら、いくつでも構わない。
【0065】
A像信号、B像信号の強度比rを算出した画素において、それぞれA像信号出力とB像信号出力を算出する。A像信号、B像信号強度比rを算出した画素におけるA像信号出力をAd121,Ad122,Ad123とし、B像信号出力をBd121,Bd122,Bd123とすると、A像信号、B像信号の強度比rから、下記のように求められる。
【0066】
【数10】
これら(Ad121,Ad122,Ad123)と(Bd121,Bd122,Bd123)を図12に示すようにそれぞれ直線近似することで、A像信号シェーディングデータAs[1]〜As[n]とB像信号シェーディングデータBs[1]〜Bs[n]を得る。
【0067】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、上述のシェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0068】
第2の実施形態では、第1の実施形態において算出されるシェーディングデータをさらに精度良く求める方法を提案する。
【0069】
第2の実施形態では、シェーディングデータAs[1]〜As[n]、Bs[1]〜Bs[n]は、撮影レンズの射出窓情報と焦点検出領域情報を用いて算出されるA像信号、B像信号の強度比と、A像信号、B像信号の焦点検出領域内における強度分布の、2つのパラメータから求められる。焦点検出装置のコストダウンと高速な焦点検出を実現するためには、シェーディングデータの算出は演算負荷の軽いことが求められる。そこで第2の実施形態では、シェーディングデータに用いるA像信号、B像信号の強度比と強度分布の算出を、撮影レンズ射出窓情報と焦点検出領域情報から決まるパラメータの1次式で簡易的に求めることを特徴としている。
【0070】
第2の実施形態におけるシェーディング補正サブルーチン(S301)の動作フローを図18に示す。カメラ本体1のCPU20は、シェーディング補正(S301)が実行されると、撮影レンズメモリ回路31から撮影レンズの固有情報を読み込む(S302)。この撮影レンズ固有情報には、撮影レンズのFナンバー情報や撮影レンズ射出窓位置、射出窓半径などが含まれている。次にCPU20は、焦点検出領域入力手段や、視線入力手段などによって決定された焦点検出領域を読み込む(S303)。レンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるためにA像信号、B像信号に生じる強度比を算出する(S304)。さらにレンズ情報読み込み(S302)と焦点検出領域読み込み(S303)で得られたレンズ情報や焦点検出領域に基づいて、撮影光学系の口径食によって制限されるために焦点検出領域内の画素間でA像信号、B像信号に生じる強度変化、つまり強度分布を算出する(S305)。強度分布算出(S305)では、A像信号、B像信号のうち、どちらか一方の強度分布だけを算出する(S305)。強度比算出(S304)と強度分布算出(S305)で得られた、A像信号、B像信号の強度比と強度分布に基づいて、シェーディングデータを作成する(S306)。このシェーディングデータは、均一輝度被写体に対して焦点検出のための撮像(S202)を行った際に得られるべきA像信号、B像信号である。シェーディング補正(S301)では、均一輝度被写体に対して得られたA像信号、B像信号が、図7(a)に示すように焦点検出領域内の全ての画素においてA像信号、B像信号からの出力が均一になるようにすることが目的である。そこでシェーディング波形作成(S306)で得られたシェーディング波形に基づいて、焦点検出のための撮像(S202)で得られたA像信号、B像信号の補正を行ない(S307)、焦点検出サブルーチンへリターンする(S308)。
【0071】
A像信号、B像信号の強度比算出は、第1の実施形態と同様の手法で求められる。図10に示すように、焦点検出開口瞳76の中心の光軸に対するシフト量をtとし、焦点検出開口瞳76の幅をTとしたときに、この撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比が簡易的に求められる。
【0072】
【数11】
この係数C1はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20が強度比の対数rを算出する際には、メモリ回路22から読み込んでくる。
【0073】
従来技術では、A像信号、B像信号の強度比を、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータt/Tの1次式でA像信号、B像信号の強度比が簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0074】
次にシェーディングデータを算出する際に用いるA像信号、B像信号の強度分布算出について説明する。A像信号、B像信号の強度分布算出では、A像信号とB像信号どちらか一方の強度分布を求める。求める強度分布はA像信号とB像信号、どちらでも構わない。ここでは、A像信号の強度分布を求めていくことにする。
【0075】
図13は図5のx方向から見たAF瞳領域40を示している。一点鎖線75の交点は撮影レンズの光軸である。投影射出窓71−1は、射出窓1を周辺画素73からAF瞳領域40に投影したものである。投影射出窓72−1は、射出窓2を周辺画素73からAF瞳領域40に投影したものである。AF瞳領域は投影射出窓71−1と投影射出窓72−1によって切り出されて焦点検出開口瞳76を形成している。
【0076】
A像瞳領域74aとB像瞳領域74bの境界線は撮影レンズの光軸を通過している。A像信号の強度分布はA像瞳領域74aの面積に比例する。このA像瞳領域74aの面積は、A像瞳領域74aの幅Taにほぼ比例する。Taは以下のように表される。
【0077】
【数12】
そこで、複数の撮影レンズの射出窓情報と複数の周辺画素73の位置との組み合わせから得られるTaと、一様輝度の被写体に対して得られる周辺画素73のA像信号出力Arをプロットしていくと、図14のようになる。横軸はTa、縦軸はA像信号出力Arである。するとTaとArは、1次式の関係が成り立っている。
【0078】
【数13】
つまりTaの1次式で簡易的にA像信号出力Arの算出が可能であることが分かる。この係数C2はデジタルスチルカメラ1のメモリ回路22に格納しておく。CPU20がA像信号出力Arを算出する際には、メモリ回路22から読み込んでくる。
【0079】
図12は、上記Taから算出されたA像信号出力を用いて、A像信号強度分布を算出する過程を示している。ここで、図12に示すように、焦点検出領域の両端と中央の3点の画素においてA像信号出力を算出し、Ad121,Ad122,Ad123とする。A像信号出力を算出する画素は2つ以上であるなら、いくつでも構わない。これらAd121,Ad122,Ad123をA像信号の強度分布とする。
【0080】
従来技術では、A像信号の強度分布を、光軸から周辺画素73までの距離Lの多項式で表そうとすると、多項式の次数が大きくなってしまい、計算量が大きく演算負荷が大きくなる。しかし本実施形態では、撮影レンズ射出窓情報と焦点検出領域情報から求められるパラメータTaの1次式でA像信号の強度分布が簡易的に求められるため、演算負荷が小さい。そのため処理速度の速くない計算機を搭載しても十分に高速な焦点検出が実現できる。
【0081】
以上述べてきたA像信号、B像信号強度比とA像信号の強度分布から、シェーディングデータを算出する。A像信号強度分布を算出した画素において、それぞれA像信号、B像信号の強度比rを算出し、r121,r122,r123とする。算出方法は、先に述べたように撮影レンズ射出窓情報と周辺画素73の位置からパラメータt/Tを算出し、式(14)に基づいてA像信号、B像信号の強度比rを求める。A像信号強度分布を算出した画素におけるB像信号出力Bd121,Bd122,Bd123は、A像信号強度分布Ad121,Ad122,Ad123とA像信号、B像信号の強度比rから、下記のように求められる。
【0082】
【数14】
これら(Ad121,Ad122,Ad123)と(Bd121,Bd122,Bd123)を図12に示すようにそれぞれ直線近似することで、A像信号シェーディングデータAs[1]〜As[n]とB像信号シェーディングデータBs[1]〜Bs[n]を得る。
【0083】
従来技術では、焦点検出領域が光軸から離れた位置にあり、A像信号、B像信号間にアンバランスが生じる場合には、焦点検出用光束のFナンバーを大きくして、撮影光学系の口径食によるケラレの影響を軽減しなければならなかった。つまり焦点検出領域の位置によって焦点検出用光束のFナンバーが制限されていた。しかし本実施形態では、シェーディングデータに基づいてA像信号、B像信号間に生じるアンバランスを補正することで、Fナンバーの制限を回避することが可能となった。
【0084】
以上説明したように、上記の実施形態によれば、撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1光電変換素子列と前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2光電変換素子列よりなる固体撮像素子を有し、前記第1光電変換素子列からの像信号である第1の像信号と、前記第2光電変換素子列からの像信号である第2の像信号とで相関演算を行うことによって撮影光学系の焦点状態を検出する焦点検出装置において、焦点検出瞳領域が前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて前記第1光電変換素子と第2光電変換素子からの信号に生じる強度差を補正することで、次の効果が得られる。
(1)撮影光学系の口径食によって焦点検出用光束が制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正することが可能となる。
(2)焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されることがなくなる。
【0085】
また前記焦点検出装置において、所定の焦点検出領域内の少なくとも二つの焦点検出画素における強度差に基づいて、焦点検出領域内の全ての画素における前記第1光電変換素子と第2光電変換素子からの信号に生じる強度差を補正することで、次の効果が得られる。
(3)撮影光学系の口径食によって焦点検出用光束が制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、さらに少ない計算量で効率的に補正することが可能となる。
【0086】
【他の実施形態】
本発明は、複数の機器から構成されるシステムに適用しても良いし、また、単体の機器から成る装置に適用しても良いしLANなどのネットワークを介して処理が行われるシステムに適用しても良い。
【0087】
また、各実施形態の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体(または記録媒体)を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム(OS)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0088】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0089】
本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した手順に対応するプログラムコードが格納されることになる。
【0090】
【発明の効果】
以上説明したように、本発明によれば、撮影光学系の口径食によって制限された場合に、第1の像信号と第2の像信号との間に生じるアンバランスを、少ない計算量で効率的に補正することができる。
【0091】
また、焦点検出領域によって焦点検出に用いる光束のFナンバーが制限されないようにすることができる。
【図面の簡単な説明】
【図1】本発明の実施形態に係わるカメラとレンズの構成を示す図である。
【図2】イメージセンサの構成と撮影レンズとの関係を示す図である。
【図3】撮影レンズの瞳を示す図である。
【図4】相関演算処理の説明図である。
【図5】撮影レンズの射出窓によって焦点検出開口瞳が形成されている状態を示す斜視図である。
【図6】撮影レンズの射出窓によって焦点検出開口瞳が形成されている状態を示す図である。
【図7】一様輝度被写体のA像信号、B像信号((a)光軸上、(b)光軸上、(c)軸外)と一般的な被写体のA像信号、B像信号((a)光軸上、(b)光軸上、(c)軸外)を示す図である。
【図8】シェーディング補正(光軸上)を行っている状態を示す図である。
【図9】シェーディング補正(光軸外)を行っている状態を示す図である。
【図10】強度比r算出のためのパラメータt/Tを示す図である。
【図11】パラ−メータt/Tと強度比の対数rの関係を示す図である。
【図12】A像信号強度分布とB像信号強度分布からシェーディングデータを算出している状態を示す図である。
【図13】A像信号出力Ar算出のためのパラメータTaを示す図である。
【図14】パラメータTaとA像信号出力Arの関係を示す図である。
【図15】カメラの動作説明フローチャートである。
【図16】焦点検出サブルーチンの動作説明フローチャートである。
【図17】第1の実施形態におけるシェーディング補正サブルーチンの動作説明フローチャートである。
【図18】第2の実施形態におけるシェーディング補正サブルーチンの動作説明フローチャートである。
Claims (1)
- 撮影光学系の射出瞳の第1の領域を通過する第1の光束を光電変換する第1の光電変換素子列と、前記射出瞳の前記第1の領域とは異なる第2の領域を通過する第2の光束を光電変換する第2の光電変換素子列とを備える固体撮像素子と、
撮像画面中の焦点検出領域の位置に応じて、前記撮影光学系の射出窓によって制限されて形成される焦点検出開口瞳の光軸に対するシフト量と、前記焦点検出開口瞳の幅との比に基づいて、前記第1の光電変換素子列からの像信号である第1の像信号と、前記第2の光電変換素子列からの像信号である第2の像信号について相関演算を行うことによって前記撮影光学系の焦点状態を検出する演算手段とを具備することを特徴とする焦点検出装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002359474A JP2004191629A (ja) | 2002-12-11 | 2002-12-11 | 焦点検出装置 |
US10/733,424 US7474352B2 (en) | 2002-12-11 | 2003-12-10 | Focus detection based on an opening pupil ratio |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002359474A JP2004191629A (ja) | 2002-12-11 | 2002-12-11 | 焦点検出装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004191629A true JP2004191629A (ja) | 2004-07-08 |
Family
ID=32758861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002359474A Withdrawn JP2004191629A (ja) | 2002-12-11 | 2002-12-11 | 焦点検出装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7474352B2 (ja) |
JP (1) | JP2004191629A (ja) |
Cited By (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006154065A (ja) * | 2004-11-26 | 2006-06-15 | Canon Inc | 撮像装置及びその制御方法 |
KR100769724B1 (ko) | 2006-09-25 | 2007-10-24 | 삼성전기주식회사 | 카메라 모듈의 광축 검사 방법 및 비네팅 검출 방법 |
JP2008122835A (ja) * | 2006-11-15 | 2008-05-29 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
JP2009124575A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
JP2009124574A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
WO2009107705A1 (ja) | 2008-02-28 | 2009-09-03 | ソニー株式会社 | 撮像装置および撮像素子 |
WO2010050403A1 (en) * | 2008-10-30 | 2010-05-06 | Canon Kabushiki Kaisha | Image capturing apparatus |
WO2010055835A1 (en) * | 2008-11-14 | 2010-05-20 | Canon Kabushiki Kaisha | Focus detection apparatus, focus detection method, and image sensing apparatus |
JP2010145544A (ja) * | 2008-12-16 | 2010-07-01 | Canon Inc | 焦点検出装置及びその制御方法及びプログラム |
WO2010131725A1 (en) * | 2009-05-12 | 2010-11-18 | Canon Kabushiki Kaisha | Focus detection apparatus |
JP2011114553A (ja) * | 2009-11-26 | 2011-06-09 | Nikon Corp | 撮像装置 |
JP2011203331A (ja) * | 2010-03-24 | 2011-10-13 | Fujifilm Corp | 立体撮像装置 |
WO2012018102A1 (en) * | 2010-08-03 | 2012-02-09 | Canon Kabushiki Kaisha | Focus detection apparatus and image pickup apparatus |
JP2012098550A (ja) * | 2010-11-02 | 2012-05-24 | Nikon Corp | 焦点検出装置、焦点調節装置および撮像装置 |
JP2012220790A (ja) * | 2011-04-11 | 2012-11-12 | Canon Inc | 撮像装置 |
JP2013037295A (ja) * | 2011-08-10 | 2013-02-21 | Olympus Imaging Corp | 撮像装置及び撮像素子 |
JP2013037296A (ja) * | 2011-08-10 | 2013-02-21 | Olympus Imaging Corp | 撮像装置及び撮像素子 |
WO2013133115A1 (ja) * | 2012-03-06 | 2013-09-12 | 株式会社ニコン | デフォーカス量検出装置およびカメラ |
JP2013190471A (ja) * | 2012-03-12 | 2013-09-26 | Canon Inc | 画像処理装置、焦点検出装置、および、画像処理プログラム |
US8576329B2 (en) | 2008-11-11 | 2013-11-05 | Canon Kabushiki Kaisha | Focus detection apparatus and control method therefor |
JP2014006388A (ja) * | 2012-06-25 | 2014-01-16 | Canon Inc | 撮像装置およびその制御方法ならびにプログラム |
JP2014026062A (ja) * | 2012-07-26 | 2014-02-06 | Sony Corp | 撮像装置および撮像方法 |
JP2014032414A (ja) * | 2013-10-02 | 2014-02-20 | Nikon Corp | 撮像装置 |
JP2014039311A (ja) * | 2010-09-13 | 2014-02-27 | Fujifilm Corp | 単眼立体撮像装置、単眼立体撮像装置用シェーディング補正方法及び単眼立体撮像装置用プログラム |
US8675121B2 (en) | 2008-10-30 | 2014-03-18 | Canon Kabushiki Kaisha | Camera and camera system |
US8730374B2 (en) | 2009-07-07 | 2014-05-20 | Canon Kabushiki Kaisha | Focus detection apparatus |
JP2014109760A (ja) * | 2012-12-04 | 2014-06-12 | Canon Inc | 撮像装置及びその制御方法、レンズ装置 |
US8786676B2 (en) | 2010-03-23 | 2014-07-22 | Fujifilm Corporation | Imaging device for generating stereoscopic image |
US8848096B2 (en) | 2011-04-19 | 2014-09-30 | Canon Kabushiki Kaisha | Image-pickup apparatus and control method therefor |
US8937679B2 (en) | 2010-09-17 | 2015-01-20 | Fujifilm Corporation | Imaging device including an optical view finder and a display unit that displays a live view image |
JP2015075526A (ja) * | 2013-10-07 | 2015-04-20 | キヤノン株式会社 | 距離算出装置、撮像装置および距離算出方法 |
WO2015111269A1 (ja) * | 2014-01-27 | 2015-07-30 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP2016118697A (ja) * | 2014-12-22 | 2016-06-30 | オリンパス株式会社 | 撮影装置 |
JP2017021052A (ja) * | 2016-10-06 | 2017-01-26 | キヤノン株式会社 | 画像データ処理装置、距離算出装置、撮像装置および画像データ処理方法 |
JP2019028358A (ja) * | 2017-08-02 | 2019-02-21 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP2020154037A (ja) * | 2019-03-18 | 2020-09-24 | キヤノン株式会社 | 撮像装置及び焦点検出方法 |
WO2022130662A1 (ja) * | 2020-12-17 | 2022-06-23 | ソニーグループ株式会社 | 撮像装置、信号処理方法 |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100739173B1 (ko) * | 2005-03-16 | 2007-07-13 | 엘지전자 주식회사 | 영상통화 중 영상 생성 방법 및 그 장치 |
JP4910366B2 (ja) * | 2005-11-09 | 2012-04-04 | 株式会社ニコン | 焦点検出装置、光学システムおよび焦点検出方法 |
US7751700B2 (en) * | 2006-03-01 | 2010-07-06 | Nikon Corporation | Focus adjustment device, imaging device and focus adjustment method |
JP4770560B2 (ja) * | 2006-04-11 | 2011-09-14 | 株式会社ニコン | 撮像装置、カメラおよび画像処理方法 |
JP4857877B2 (ja) * | 2006-04-11 | 2012-01-18 | 株式会社ニコン | 撮像装置およびカメラ |
JP2007316417A (ja) * | 2006-05-26 | 2007-12-06 | Matsushita Electric Ind Co Ltd | 高域情報検出処理装置および撮像装置 |
US7853138B2 (en) * | 2007-02-19 | 2010-12-14 | Canon Kabushiki Kaisha | Camera and photographic lens and diaphragm for starting a defocus detection without waiting for completion of an aperture opening operation |
US8125560B1 (en) | 2007-08-13 | 2012-02-28 | Ambarella, Inc. | System for topology based automatic focus |
EP2180362A4 (en) * | 2007-10-02 | 2011-03-30 | Nikon Corp | LIGHT RECEIVING DEVICE, FOCUS DETECTION DEVICE AND IMAGING APPARATUS |
US8279318B2 (en) * | 2007-12-14 | 2012-10-02 | Canon Kabushiki Kaisha | Image pickup apparatus and display control method for the same |
JP5225151B2 (ja) * | 2008-03-11 | 2013-07-03 | キヤノン株式会社 | 撮像装置及び画像処理方法 |
JP5089515B2 (ja) * | 2008-07-15 | 2012-12-05 | キヤノン株式会社 | 焦点調節装置、撮像装置、交換レンズ、換算係数較正方法、換算係数較正プログラム |
JP5317562B2 (ja) * | 2008-07-17 | 2013-10-16 | キヤノン株式会社 | 位相差検出装置、撮像装置、位相差検出方法、位相差検出プログラム |
JP5161702B2 (ja) * | 2008-08-25 | 2013-03-13 | キヤノン株式会社 | 撮像装置、撮像システム、及び焦点検出方法 |
JP5302663B2 (ja) * | 2008-12-24 | 2013-10-02 | キヤノン株式会社 | 焦点検出装置及び方法、及び撮像装置 |
US8570427B2 (en) * | 2009-01-28 | 2013-10-29 | Nikon Corporation | Image-capturing device having focus adjustment function, image creation method including focus adjustment function, and program product for image-capturing device having focus adjustment function |
KR20100138614A (ko) * | 2009-06-25 | 2010-12-31 | 삼성전자주식회사 | 자동초점 검출장치 및 이를 적용한 카메라 |
CN102713713B (zh) * | 2009-10-13 | 2016-01-27 | 佳能株式会社 | 焦点调节设备和焦点调节方法 |
JP2012042669A (ja) * | 2010-08-18 | 2012-03-01 | Sony Corp | 顕微鏡制御装置及び光学的歪み補正方法 |
JP5901246B2 (ja) * | 2010-12-13 | 2016-04-06 | キヤノン株式会社 | 撮像装置 |
JP5850627B2 (ja) * | 2011-03-30 | 2016-02-03 | キヤノン株式会社 | 撮像装置 |
JP5917207B2 (ja) * | 2012-03-14 | 2016-05-11 | キヤノン株式会社 | 焦点調節装置 |
WO2013146506A1 (ja) * | 2012-03-27 | 2013-10-03 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
JP6016412B2 (ja) * | 2012-03-30 | 2016-10-26 | キヤノン株式会社 | 撮像装置および信号処理方法 |
JP6014452B2 (ja) | 2012-10-16 | 2016-10-25 | キヤノン株式会社 | 焦点検出装置及びそれを有するレンズ装置及び撮像装置 |
JP6033038B2 (ja) * | 2012-10-26 | 2016-11-30 | キヤノン株式会社 | 焦点検出装置、撮像装置、撮像システム、および、焦点検出方法 |
JP2014106476A (ja) | 2012-11-29 | 2014-06-09 | Canon Inc | 焦点検出装置、撮像装置、撮像システム、焦点検出方法、プログラム、および、記憶媒体 |
JP5981026B2 (ja) * | 2013-03-29 | 2016-08-31 | 富士フイルム株式会社 | 画像処理装置、撮像装置、プログラム及び画像処理方法 |
WO2014171304A1 (ja) * | 2013-04-17 | 2014-10-23 | 富士フイルム株式会社 | 撮像装置、撮像装置駆動方法、撮像装置制御プログラム |
JP5701942B2 (ja) * | 2013-07-10 | 2015-04-15 | オリンパス株式会社 | 撮像装置、カメラシステム及び画像処理方法 |
JP6372983B2 (ja) * | 2013-09-02 | 2018-08-15 | キヤノン株式会社 | 焦点検出装置およびその制御方法、撮像装置 |
JP6270601B2 (ja) * | 2014-04-09 | 2018-01-31 | キヤノン株式会社 | 撮像装置およびその制御方法、撮像システム |
JP2015212772A (ja) * | 2014-05-02 | 2015-11-26 | キヤノン株式会社 | 測距装置、撮像装置、測距方法、および測距パラメータ算出方法 |
US10412378B2 (en) | 2017-05-08 | 2019-09-10 | Microsoft Technology Licensing, Llc | Resonating optical waveguide using multiple diffractive optical elements |
US10222615B2 (en) | 2017-05-26 | 2019-03-05 | Microsoft Technology Licensing, Llc | Optical waveguide with coherent light source |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5632126A (en) * | 1979-08-24 | 1981-04-01 | Canon Inc | Ttl type focus detector for lens interchangeable type camera |
JPS5650315A (en) * | 1979-10-01 | 1981-05-07 | Canon Inc | Focus detecting method and device |
US4410804A (en) | 1981-07-13 | 1983-10-18 | Honeywell Inc. | Two dimensional image panel with range measurement capability |
US5202555A (en) * | 1983-01-10 | 1993-04-13 | Minolta Camera Kabushiki Kaisha | Focus detecting device for use with cameras with correlation and contrast detecting means |
JPS59165012A (ja) * | 1983-03-11 | 1984-09-18 | Fuji Photo Optical Co Ltd | オ−トフオ−カス検出装置 |
JPH0762731B2 (ja) | 1983-10-19 | 1995-07-05 | 株式会社ニコン | 自動焦点検出装置 |
JPH0772762B2 (ja) * | 1985-10-30 | 1995-08-02 | ミノルタ株式会社 | 焦点検出装置 |
JP2859388B2 (ja) * | 1990-07-06 | 1999-02-17 | 旭光学工業株式会社 | 撮影レンズ |
JPH05257062A (ja) * | 1992-03-10 | 1993-10-08 | Canon Inc | 自動焦点装置 |
JPH08248303A (ja) * | 1995-03-07 | 1996-09-27 | Minolta Co Ltd | 焦点検出装置 |
US6192163B1 (en) * | 1996-10-29 | 2001-02-20 | Seiko Epson Corporation | Image processing method and image processing apparatus |
JPH1138525A (ja) * | 1997-07-24 | 1999-02-12 | Brother Ind Ltd | 画像読取装置 |
US6571022B2 (en) * | 1997-08-06 | 2003-05-27 | Minolta Co., Ltd. | Image processing apparatus for generating a single image of an object using overlapping partial images |
US7102675B1 (en) * | 1997-11-14 | 2006-09-05 | Canon Kabushiki Kaisha | Photoelectric conversion device, focus detection device, method of controlling these devices, and storage medium |
JP4265029B2 (ja) | 1999-05-11 | 2009-05-20 | 株式会社ニコン | 画像取り込み装置および交換レンズ |
JP5002086B2 (ja) | 1999-10-28 | 2012-08-15 | キヤノン株式会社 | 焦点検出装置と撮像装置 |
JP4408001B2 (ja) * | 2000-12-21 | 2010-02-03 | キヤノン株式会社 | 撮像装置および撮像システム |
-
2002
- 2002-12-11 JP JP2002359474A patent/JP2004191629A/ja not_active Withdrawn
-
2003
- 2003-12-10 US US10/733,424 patent/US7474352B2/en not_active Expired - Fee Related
Cited By (52)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4564831B2 (ja) * | 2004-11-26 | 2010-10-20 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP2006154065A (ja) * | 2004-11-26 | 2006-06-15 | Canon Inc | 撮像装置及びその制御方法 |
KR100769724B1 (ko) | 2006-09-25 | 2007-10-24 | 삼성전기주식회사 | 카메라 모듈의 광축 검사 방법 및 비네팅 검출 방법 |
JP2008122835A (ja) * | 2006-11-15 | 2008-05-29 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
JP2009124575A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
JP2009124574A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 相関演算方法、相関演算装置、焦点検出装置および撮像装置 |
WO2009107705A1 (ja) | 2008-02-28 | 2009-09-03 | ソニー株式会社 | 撮像装置および撮像素子 |
US8319882B2 (en) | 2008-02-28 | 2012-11-27 | Sony Corporation | Image pickup device and image pickup element including plurality of types of pixel pairs |
US8675121B2 (en) | 2008-10-30 | 2014-03-18 | Canon Kabushiki Kaisha | Camera and camera system |
JP2010107770A (ja) * | 2008-10-30 | 2010-05-13 | Canon Inc | 撮像装置 |
WO2010050403A1 (en) * | 2008-10-30 | 2010-05-06 | Canon Kabushiki Kaisha | Image capturing apparatus |
US8477233B2 (en) | 2008-10-30 | 2013-07-02 | Canon Kabushiki Kaisha | Image capturing apparatus |
US8576329B2 (en) | 2008-11-11 | 2013-11-05 | Canon Kabushiki Kaisha | Focus detection apparatus and control method therefor |
JP2010117679A (ja) * | 2008-11-14 | 2010-05-27 | Canon Inc | 焦点検出装置及び方法、及び撮像装置 |
WO2010055835A1 (en) * | 2008-11-14 | 2010-05-20 | Canon Kabushiki Kaisha | Focus detection apparatus, focus detection method, and image sensing apparatus |
US8654227B2 (en) | 2008-11-14 | 2014-02-18 | Canon Kabushiki Kaisha | Focus detection apparatus, focus detection method, and image sensing apparatus |
JP2010145544A (ja) * | 2008-12-16 | 2010-07-01 | Canon Inc | 焦点検出装置及びその制御方法及びプログラム |
KR101310105B1 (ko) * | 2009-05-12 | 2013-10-14 | 캐논 가부시끼가이샤 | 초점 검출장치 |
JP2010286826A (ja) * | 2009-05-12 | 2010-12-24 | Canon Inc | 焦点検出装置 |
US8704933B2 (en) | 2009-05-12 | 2014-04-22 | Canon Kabushiki Kaisha | Focus detection apparatus |
WO2010131725A1 (en) * | 2009-05-12 | 2010-11-18 | Canon Kabushiki Kaisha | Focus detection apparatus |
US8730374B2 (en) | 2009-07-07 | 2014-05-20 | Canon Kabushiki Kaisha | Focus detection apparatus |
JP2011114553A (ja) * | 2009-11-26 | 2011-06-09 | Nikon Corp | 撮像装置 |
US8786676B2 (en) | 2010-03-23 | 2014-07-22 | Fujifilm Corporation | Imaging device for generating stereoscopic image |
JP2011203331A (ja) * | 2010-03-24 | 2011-10-13 | Fujifilm Corp | 立体撮像装置 |
US8872962B2 (en) | 2010-08-03 | 2014-10-28 | Canon Kabushiki Kaisha | Focus detection apparatus and image pickup apparatus |
WO2012018102A1 (en) * | 2010-08-03 | 2012-02-09 | Canon Kabushiki Kaisha | Focus detection apparatus and image pickup apparatus |
JP2014039311A (ja) * | 2010-09-13 | 2014-02-27 | Fujifilm Corp | 単眼立体撮像装置、単眼立体撮像装置用シェーディング補正方法及び単眼立体撮像装置用プログラム |
US9282312B2 (en) | 2010-09-13 | 2016-03-08 | Fujifilm Corporation | Single-eye stereoscopic imaging device, correction method thereof, and recording medium thereof |
US8937679B2 (en) | 2010-09-17 | 2015-01-20 | Fujifilm Corporation | Imaging device including an optical view finder and a display unit that displays a live view image |
JP2012098550A (ja) * | 2010-11-02 | 2012-05-24 | Nikon Corp | 焦点検出装置、焦点調節装置および撮像装置 |
JP2012220790A (ja) * | 2011-04-11 | 2012-11-12 | Canon Inc | 撮像装置 |
US8848096B2 (en) | 2011-04-19 | 2014-09-30 | Canon Kabushiki Kaisha | Image-pickup apparatus and control method therefor |
JP2013037296A (ja) * | 2011-08-10 | 2013-02-21 | Olympus Imaging Corp | 撮像装置及び撮像素子 |
JP2013037295A (ja) * | 2011-08-10 | 2013-02-21 | Olympus Imaging Corp | 撮像装置及び撮像素子 |
WO2013133115A1 (ja) * | 2012-03-06 | 2013-09-12 | 株式会社ニコン | デフォーカス量検出装置およびカメラ |
JP2013190471A (ja) * | 2012-03-12 | 2013-09-26 | Canon Inc | 画像処理装置、焦点検出装置、および、画像処理プログラム |
JP2014006388A (ja) * | 2012-06-25 | 2014-01-16 | Canon Inc | 撮像装置およびその制御方法ならびにプログラム |
JP2014026062A (ja) * | 2012-07-26 | 2014-02-06 | Sony Corp | 撮像装置および撮像方法 |
JP2014109760A (ja) * | 2012-12-04 | 2014-06-12 | Canon Inc | 撮像装置及びその制御方法、レンズ装置 |
JP2014032414A (ja) * | 2013-10-02 | 2014-02-20 | Nikon Corp | 撮像装置 |
JP2015075526A (ja) * | 2013-10-07 | 2015-04-20 | キヤノン株式会社 | 距離算出装置、撮像装置および距離算出方法 |
WO2015111269A1 (ja) * | 2014-01-27 | 2015-07-30 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP5972485B2 (ja) * | 2014-01-27 | 2016-08-17 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
US10015405B2 (en) | 2014-01-27 | 2018-07-03 | Fujifilm Corporation | Image processing device, imaging device, image processing method, and image processing program |
JP2016118697A (ja) * | 2014-12-22 | 2016-06-30 | オリンパス株式会社 | 撮影装置 |
JP2017021052A (ja) * | 2016-10-06 | 2017-01-26 | キヤノン株式会社 | 画像データ処理装置、距離算出装置、撮像装置および画像データ処理方法 |
JP2019028358A (ja) * | 2017-08-02 | 2019-02-21 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP7019337B2 (ja) | 2017-08-02 | 2022-02-15 | キヤノン株式会社 | 像ブレ補正装置、レンズ装置およびそれらの制御方法 |
JP2020154037A (ja) * | 2019-03-18 | 2020-09-24 | キヤノン株式会社 | 撮像装置及び焦点検出方法 |
JP7292909B2 (ja) | 2019-03-18 | 2023-06-19 | キヤノン株式会社 | 撮像装置及び焦点検出方法 |
WO2022130662A1 (ja) * | 2020-12-17 | 2022-06-23 | ソニーグループ株式会社 | 撮像装置、信号処理方法 |
Also Published As
Publication number | Publication date |
---|---|
US20040179128A1 (en) | 2004-09-16 |
US7474352B2 (en) | 2009-01-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2004191629A (ja) | 焦点検出装置 | |
EP1975695B1 (en) | Focus detection device, focusing state detection method and imaging apparatus | |
JP4574022B2 (ja) | 撮像装置及びシェーディング補正方法 | |
US9279955B2 (en) | Image pickup apparatus, control method thereof, and program | |
US8890972B2 (en) | Image capturing apparatus and image processing method | |
JP5169499B2 (ja) | 撮像素子および撮像装置 | |
JP5066851B2 (ja) | 撮像装置 | |
US20120268613A1 (en) | Image capturing apparatus and control method thereof | |
US8902349B2 (en) | Image pickup apparatus | |
US10009533B2 (en) | Image pickup apparatus and control method thereof with contrast focus evaluation | |
JP2007184716A (ja) | 撮像素子および撮像兼焦点検出装置 | |
KR101711804B1 (ko) | 초점검출장치, 초점검출방법 및 촬상장치 | |
JP2007282108A (ja) | 撮像装置、カメラおよび画像処理方法 | |
JP2010140013A (ja) | 焦点検出装置及びその制御方法 | |
US20160301838A1 (en) | Image capture apparatus | |
US8872963B2 (en) | Imaging apparatus and imaging method | |
JP2008040087A (ja) | 撮像素子、撮像装置および焦点検出装置 | |
JP5784395B2 (ja) | 撮像装置 | |
US9602716B2 (en) | Focus-detection device, method for controlling the same, and image capture apparatus | |
US9049365B2 (en) | Image capturing apparatus and control method thereof | |
JP2009086490A (ja) | 撮像装置 | |
JP2011175172A (ja) | デジタルカメラ | |
JPH06311422A (ja) | 撮像装置および撮像方法 | |
JP2014222268A (ja) | 撮像装置および撮像装置の制御方法 | |
JP2015159432A (ja) | 撮影装置および撮影方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20060307 |