JP6270601B2 - 撮像装置およびその制御方法、撮像システム - Google Patents
撮像装置およびその制御方法、撮像システム Download PDFInfo
- Publication number
- JP6270601B2 JP6270601B2 JP2014079833A JP2014079833A JP6270601B2 JP 6270601 B2 JP6270601 B2 JP 6270601B2 JP 2014079833 A JP2014079833 A JP 2014079833A JP 2014079833 A JP2014079833 A JP 2014079833A JP 6270601 B2 JP6270601 B2 JP 6270601B2
- Authority
- JP
- Japan
- Prior art keywords
- half mirror
- pupil
- image
- correction value
- shading correction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 48
- 238000000034 method Methods 0.000 title claims description 6
- 210000001747 pupil Anatomy 0.000 claims description 109
- 230000003287 optical effect Effects 0.000 claims description 43
- 238000001514 detection method Methods 0.000 claims description 39
- 238000003705 background correction Methods 0.000 claims description 38
- 238000012937 correction Methods 0.000 claims description 18
- 230000035945 sensitivity Effects 0.000 claims description 14
- 230000003595 spectral effect Effects 0.000 claims description 10
- 230000006870 function Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 13
- 230000002093 peripheral effect Effects 0.000 description 10
- 238000013459 approach Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000037433 frameshift Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000013256 coordination polymer Substances 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 241001025261 Neoraja caerulea Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G06T5/94—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/13—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
- H04N23/16—Optical arrangements associated therewith, e.g. for beam-splitting or for colour correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
Description
本発明は、光路内に進退可能なハーフミラーを有する撮像装置に関する。
特許文献1では、焦点検出素子の機能も兼ねている撮像素子を有する撮像装置が開示されている。特許文献1に記載の撮像装置は、光路中にハーフミラーが進入した際に、該ハーフミラーの進入による像面移動量を撮影レンズ絞り値等を考慮してデフォーカス量のオフセット量として記憶し、デフォーカス量を補正する技術が開示されている。
しかしながら、特許文献1に開示された撮像装置では、ハーフミラーの進入により各焦点検出画素に対応する瞳の位置がずれ、シェーディングが変化してしまうことについては考慮されていない。
そこで、本発明は、上記課題を鑑み、焦点検出に有利な撮像装置を提供することを目的とする。
本発明の一側面としての撮像装置は、光路に進退可能に設けられたハーフミラーと、撮像素子と、前記撮像素子から出力される信号をシェーディング補正する補正手段と、を有し、前記補正手段は、前記ハーフミラーの状態が前記光路から退避している退避状態にあるときは、第1のシェーディング補正値を用いて前記信号を補正し、前記ハーフミラーの状態が前記光路に進入している進入状態にあるときは、前記第1のシェーディング補正値とは異なる第2のシェーディング補正値を用いて前記信号を補正する、ことを特徴とする。
本発明の他の目的及び特徴は、以下の実施例において説明される。
本発明によれば、焦点検出に有利な撮像装置を提供することができる。
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
図1は本実施形態に係る撮像装置の構成例を示す。図1では、レンズ交換型の撮像装置(撮像システム)を例に説明するが、本発明の撮像装置はこれに限定されず、レンズ一体型の撮像装置であってもよい。なお、被写体側を撮像装置の前方と定義し、像側を撮像装置の後方と定義して各部の位置関係を説明する。
図1では、撮像装置(本体)と、該撮像装置(本体)に着脱可能な撮影レンズと、が接続された状態を示している。第1レンズ群101は撮影レンズ(撮像光学系)を構成するレンズ群のうち、最も前端(被写体側)に位置し、光軸方向に進退可能な状態で不図示のレンズ鏡筒に保持される。絞り兼用シャッタ102は、その開口径を調節することで撮影時の光量調節を行うとともに、静止画撮影時には露光調節用シャッタとして機能する。第2レンズ群103は、絞り兼用シャッタ102と一体となって光軸方向に進退し、第1レンズ群101の進退動作と連動して変倍動作によるズーム機能を有する。第3レンズ群105は、光軸方向に進退することで、焦点調節を行うフォーカスレンズ群である。光学的ローパスフィルタ106は、撮影画像の偽色やモアレを軽減するための光学素子である。
撮像素子107は、例えばCMOSセンサとその周辺回路で構成される。撮像素子107には、横方向にm個の画素、縦方向にn個の画素をもつ受光ピクセル上にベイヤー配列の原色カラーモザイクフィルタをオンチップで形成した、2次元単板カラーセンサ等が用いられる。後述するように、撮像素子107は、撮像画素および焦点検出画素として機能する画素を複数備えている。このように、撮像素子107は焦点検出機能を備えている。
レンズROM(読み出し専用メモリ)110は、撮像装置本体に着脱可能な交換式レンズ毎に固有のデータを記憶しており、焦点検出等に必要なレンズ情報を通信により、後述のCPU(中央演算処理装置)121に提供する。レンズ情報の一部として、射出瞳距離の情報がレンズROM110に記憶されている。
ズームアクチュエータ111は、不図示のカム筒を回動することで、第1レンズ群101と第2レンズ群103を光軸方向に沿って移動させることで、変倍動作を行う。絞りシャッタアクチュエータ112は、絞り兼用シャッタ102の開口径を制御して撮影光量を調節すると共に、静止画撮影時の露光時間制御を行う。フォーカスアクチュエータ114は、第3レンズ群105を光軸方向に移動させて焦点調節を行う。
ハーフミラー117は、光路に対し進退可能に設けられ、ミラー駆動回路118により制御されるミラーアクチュエータ119により回動し、光路に対する状態が切り替わる。ハーフミラー117が光路中に進入している状態を進入状態と呼び図1中実線で表され、退避している状態を退避状態と呼び図1中破線で表わされる。ハーフミラー117は進入状態において、撮影レンズを通過した光の一部を反射してその反射光をファインダ光学系150に導くとともに、撮影レンズを通過した光の一部を透過して、さらに光学的ローパスフィルタ106を透過し撮像素子107に導く。
ファインダ光学系150は、撮像する被写体を光学的に観察するための系である。ハーフミラー117の反射光は、ピント板151にて拡散され、ペンタダハプリズム152によって正立像に変換される。該正立像は、接眼レンズ153によって拡大され、ユーザにより観察される。
表示器131にはLCD(液晶表示装置)等を使用し、撮影モードに関する情報、撮影前のプレビュー画像や撮影後の確認用画像、焦点検出時の合焦状態表示画像等を表示する。
本実施形態に係る撮像装置においてユーザは以下の3つに分類される撮影モードを選択可能である。
第一の撮影モードは、被写体を撮影される画像として観察し、かつ、高画質な画像を撮影することを目的とするモードである。第一の撮影モードでは、観察時及び撮影時にハーフミラー117を退避状態にする。画像処理後の画像は表示器131に表示され、ユーザは画像処理後の被写体像を観察できる。また、撮影時にハーフミラー117を退避させているため、ハーフミラー117を透過することによる色収差等を原因とする画質の劣化がない画像を得ることができる。
第二の撮影モードは、動的被写体を高画質な画像として撮影することを目的とするモードである。第二の撮影モードでは、ハーフミラー117を観察時には進入状態に、撮影時には退避状態にする。ユーザはファインダ光学系150を用いて観察するため、画像処理等によるタイムラグなしで被写体像の観察が可能であり、動的被写体を観察するのに適している。また、第一の撮影モードと同様の理由により、ハーフミラー117の透過による画質の劣化がない画像を得ることができる。
第三の撮影モードは、動画撮影を目的とするモードである。第三の撮影モードでは、観察時及び撮影時にハーフミラー117を進入状態にする。ユーザはファインダ光学系150を用いることにより画像処理等によるタイムラグなしで被写体像の観察しながら、動画を撮影できる。
いずれの撮影モードにおいても、観察時に焦点検出機能を有する撮像素子107に被写体からの光が入射するため、観察時に焦点検出が可能である。つまり、ユーザが選択した撮影モードによって、焦点検出時にハーフミラー117は退避状態と進入状態である場合が存在するため、撮像素子107には、ハーフミラー117を透過した光が入射する場合とハーフミラー117を介さない光が入射する場合がある。
撮像装置本体の種々の制御を司るCPU(制御部)121は、不図示である、演算部、ROM、RAM(ランダム・アクセス・メモリ)、A/Dコンバータ、D/Aコンバータ、通信インターフェイス回路等を有する。CPU121はROMに記憶された所定のプログラムを読み出して実行することで各部を駆動し、焦点検出、撮影、画像処理、記録等の一連の動作を制御する。また、CPU121は、撮像素子107から出力される信号(画像データ)をシェーディング補正するシェーディング補正手段としての機能を有する。本発明におけるシェーディング補正手段は、ハーフミラー117の状態に応じて、撮像素子107から出力される信号を異なるシェーディング補正値で補正することを特徴とする。このシェーディング補正の詳細な内容に関しては後述する。また、CPU121は、該シェーディング補正後の信号に基づいて焦点検出を行う焦点検出手段としての機能を有する。なお、シェーディング補正手段は、後述する補正値算出部(シェーディング補正値決定手段)の機能も兼ねている。
撮像素子駆動回路124は、撮像素子107の撮像動作を制御するとともに、取得した画像信号をA/D変換してCPU121に送信する。画像処理回路125は、撮像素子107から取得した画像データのγ(ガンマ)変換、カラー補間、JPEG圧縮等の処理を行う。JPEGは”Joint Photographic Experts Group”の略号である。
フォーカス駆動回路126およびフォーカスアクチュエータ114はフォーカス手段を構成する。フォーカス駆動回路126は、焦点検出結果に基づいてフォーカスアクチュエータ114を駆動し、第3レンズ群105を光軸方向に沿って移動させることで焦点ずれ量を調節する。絞りシャッタ駆動回路128は、絞りシャッタアクチュエータ112を駆動して絞り兼用シャッタ102の開口径を制御する。ズーム駆動回路129は、撮影者のズーム操作に応じてズームアクチュエータ111を駆動する。フォーカス駆動回路126、絞りシャッタ駆動回路128、レンズROM110、ズーム駆動回路129は、それぞれ通信部130a−130dを介して撮像装置本体内の制御部(CPU121)と接続される。
操作部132は、電源スイッチ、レリーズ(撮影トリガ)スイッチ、ズーム操作スイッチ、撮影モード選択スイッチ等で構成される。記録媒体133は、例えば撮像装置に着脱可能なフラッシュメモリであり、撮影済みの画像データを記録する。
次に撮像素子107の構造を説明する。
図2(A)は、撮像素子の画素配列を説明する概略図であり、2次元CMOSセンサの画素配列を、4行×4列の画素範囲で示す。画素群210の配列は2行×2列であり、ベイヤー配列が採用されている。対角方向の2画素には、G(緑)の分光感度を有する画素部210Gが配置され、他の対角方向の2画素にはR(赤)の分光感度を有する画素部210Rと、B(青)の分光感度を有する画素部210Bが配置されている。画素部210R、210G、210Bはそれぞれ、瞳分割用の2つの副画素(焦点検出画素対)201a、201bを有する。副画素201aは、撮像光学系の第1瞳領域を通過した光束を受光する第1画素であり、第1検出部を構成する。また、副画素201bは、撮像光学系の第1瞳領域とは異なる第2瞳領域を通過した光束を受光する第2画素であり、第2検出部を構成する。このように、本発明の撮像素子は、光学系の異なる瞳領域を通過した光を光電変換して一対の信号を出力することが可能な画素を有する。各画素を構成する検出素子は、撮像素子と焦点検出素子を兼用する。
図2(B)は、図2(A)に例示した撮像素子内の画素部210Gを拡大した図である。x,y,zで示す座標軸について、x−y平面は図2の紙面内に位置し、z軸は紙面に対して垂直な軸とする。副画素201a、201bはx軸に平行な方向に沿って配置されている。
図2(C)は、図2(B)に示すa−a線に沿って画素部210Gを切断した場合の断面図である。x,y,zで示す座標軸について、x−z平面は図2の紙面内に位置し、y軸は紙面に対して垂直な軸とする。検出部はp型層200とn型層から構成されるフォトダイオードを有し、z軸方向(光軸方向)に所定の距離をおいてマイクロレンズ202が配置されている。マイクロレンズ202は配線層203上に形成される。
本実施形態では、全ての画素部にて瞳分割用の副画素が配置されており、副画素を焦点検出画素として使用する。なお、瞳分割可能であって焦点検出画素として使用する検出素子に関しては、全画素ではなく、撮像センサ面上の一部にだけ配置した構成でもよい。
次に、撮像素子107の瞳分割状況について説明する。
図3は、1つの画素部による瞳分割の様子を示す。下方に示す検出部の図にx,y,zで示す座標軸について、x−z平面は図3の紙面内に位置し、y軸は紙面に対して垂直な軸とする。検出部はp型層300と、n型層301a,301bを備える。p型層300とn型層301aは副画素201aに相当する検出素子を構成し、p型層300とn型層301bは副画素201bに相当する検出素子を構成している。z軸上にマイクロレンズ303が配置されている。
図3の上部には、射出瞳302と、枠(絞り枠やレンズ枠等)304を示す。この図にx,y,zで示す座標軸について、x−y平面は図3の紙面内に位置し、z軸は紙面に対して垂直な軸とする。
1つの画素部には、p型層300に包含されるn型層301a,301bがそれぞれ形成されており、2つの副画素がx方向に沿って規則的に配置される。2つの副画素はそれぞれ、+x方向と、−x方向に偏芯しているので、1つのマイクロレンズ303を用いて瞳分割を行える。射出瞳302には、像信号Aの瞳302aと、像信号Bの瞳302bを示す。像信号Aとは、−x方向に偏芯したn型層301aに対応する副画素で取得される第1の像信号である。また、像信号Bは、+x方向に偏芯したn型層301bに対応する副画素で取得される第2の像信号である。像信号Aと像信号Bとの相対的な像ずれ量を検出し、両者の相関演算を用いてデフォーカス量を算出することで、撮影レンズの焦点状態を検出できる。検出結果に基づいて、撮影レンズの焦点ずれ量を調節する処理が行なわれる。
なお、図3に示す例では、x方向に輝度分布を有する被写体に対応した構成について説明した。同様の構成は、y方向についても適用できるので、y方向に輝度分布を有する被写体にも対応可能である。また、本実施形態では瞳分割を行うため、1画素中に偏芯させた複数の副画素を1次元方向に配置した例を示す。瞳分割方法に関しては、これに限らず、x方向およびy方向の2次元平面にて瞳分割用の複数の副画素を配置してもよい。本実施形態では瞳分割を行う1つのマイクロレンズ当たり、複数の副画素を配置した例を示す。瞳分割方法に関しては、これに限らず、1つマイクロレンズ当たり、偏芯させた画素を1つ配置し、偏芯量の異なる複数の画素を用いて焦点検出を行ってもよい。以下、特に断りのない限り、副画素をx方向に配置し、x方向に瞳分割を行う例を前提として説明する。
次に、図4を参照して、シェーディングの発生原理と発生するシェーディングを説明する。まずは簡単のためにハーフミラー117が退避状態である場合について説明する。図4において、401aは画像信号Aの瞳強度分布、401bは画像信号Bの瞳強度分布、402は絞り枠、403a、403o、403bは各像高の画素を示す。また、404aは図4(A)の状態における画像信号Aのシェーディング、404bは図4(A)の状態における画像信号Bのシェーディングをそれぞれ示している。
図4(A)のような場合、像高が−x1の画素403bは絞り枠402を通して瞳座標上の+x2の場所の瞳を見ることになる。そのため、図4(A)の瞳強度分布401aと瞳強度分布401bを見れば分かるように画像信号Aと画像信号Bの感度を比較した場合、画像信号Bの方の感度が良いことが分かる。逆に、像高が+x1の画素403aでは絞り枠402を通して瞳座標上の−x2の場所の瞳を見ることになるため、画像信号Aと画像信号Bの感度を比較した場合、画像信号Aの方が感度が良くなる。
上記のような理由のため、図4(A)のような状態におけるシェーディングは図4(B)のようになる。シェーディングは図4(A)を見れば分かるように、絞り枠402の位置や大きさに応じて変化する性質があるため、像高、射出瞳距離または絞り値が変わるとシェーディングも変化する。
図4(B)から分かるように、シェーディングは像高に応じて連続的に変化する値であるため、像高をパラメータとする関数として表現できる。すなわち、シェーディングの補正値は、像高の関数として数式表現が可能である。前述したように、シェーディングは像高によって変化する上に、絞り値及び射出瞳距離の組合せによって変化する。本実施形態では、補正値算出部により予め条件(像高、射出瞳距離及び絞り値情報の組合せ)毎にシェーディングの補正値を算出し、その近似関数を求めておく(式(1)、式(2)参照)。近似関数の係数値のみを所定の記憶部(記憶手段)に格納すれば演算量を低減できる。
式(1)にて、S0A、S1A、S2A、S3A、S4A、S5Aは、A像用のシェーディングの補正値SA(x)を算出するための近似関数の係数である。また、式(2)にて、S0B、S1B、S2B、S3B、S4B、S5Bは、B像用のシェーディングの補正値SB(x)を算出するための近似関数の係数である。A像及びB像用の係数を総称して補正値算出係数と呼ぶ。なお、本実施形態では、撮像素子の構造において、SA(x)およびSB(x)は、y方向(x軸と直交する方向)において、原点に関して略対称形になるため偶関数で表現され、yの奇数次の項は存在しない。
以上のように、ハーフミラー117が退避状態のとき補正値算出係数は、像高、射出瞳距離及び絞り値の組合せによって決定される。これにより、像高、射出瞳距離、および、絞り値に基づく第1のシェーディング補正値が算出可能となる。
次に、ハーフミラー117の進入状態における補正値算出係数の決定方法を説明する。光路へのハーフミラー117の進入によるシェーディングへの影響について図5乃至図7を用いて説明する。なお、図5乃至図7はいずれも概念図であり、現象の説明のために寸法関係は無視して示されている。
図5はハーフミラー117の進入による周辺画素に対応する枠及び瞳のずれを示す概念図である。図5(A)は、ハーフミラー117が進入状態の場合における光路を示したy−z平面の断面図である。図5(A)には射出瞳距離の異なる3種の撮影レンズの枠面が示されており、射出瞳距離の小さい順にSF1、SF2、SF3と呼び、枠面SF2は瞳面SPと一致している。ここで、A像の瞳及びB像の瞳は紙面奥行き方向(x方向)に並んでおり、瞳面SPにおいて後述するA像の瞳中心CPA及びB像の瞳中心CPBは、図5(A)において重なっているため、一つの瞳中心CPとして表す。また、枠中心CF1、CF2、CF3は後述する枠の重心である。周辺画素502と枠中心CF1を結ぶ光線LF1はハーフミラー117により屈折するため、枠中心CF1はy方向に枠ずれ量dF1だけずれ、光線LF1はL’F1となる。ハーフミラー117によりずれた枠中心をC’F1と呼ぶ。同様に、光線LF2、LF3及びLPのそれぞれに対応する枠中心CF2、CF3及び瞳中心CPは、枠中心C’F2、C’F3及び瞳中心C’Pにずれ、光線はそれぞれL’F2、L’F3及びL’Pとなる。そのときのずれ量を枠ずれ量dF2、dF3及び瞳ずれ量dPとする。ここで、瞳中心CPと枠中心CF2は一致しているため、瞳ずれ量dPと枠ずれ量dF2は等しく、瞳中心C’Pと枠中心C’F2も一致する。光線L’F1、L’F2、L’F3及びL’Pのハーフミラー117への入射角をθF1、θF2、θF3及びθPとすると、θF1<θF2=θP<θF3が成り立つ。入射角が大きいほど、入射角と屈折角の差も大きくなるため、dF1<dF2=dP<dF3が成立する。
図5(B)乃至(G)は、各枠面SF1、SF2、SF3における瞳と枠の位置関係を示す図である。図5(B)乃至(D)は瞳と枠の全体図であり、図5(E)乃至(G)は、ハーフミラー117が進入状態のときの枠内のA像の瞳の拡大図である。図5(B)乃至(D)中、ハーフミラー117が退避状態のときのA像の瞳を512PA(瞳中心CPA)、B像の瞳を512PB(瞳中心CPB)と表す。また、ハーフミラー117が進入状態のときのA像の瞳を512’PA(瞳中心C’PA)、B像の瞳を512’PB(瞳中心C’PB)と表す。また、枠面SF1、SF2、SF3それぞれにおいて、ハーフミラー117が退避状態のときの枠を522F1、522F2、522F3(枠中心CF1、CF2、CF3)と表す。ハーフミラー117が進入状態のときの枠を522’F1、522’F2、522’F3(枠中心C’F1、C’F2、C’F3)と表す。SF1において、522’F1は図5(D)に示すように、dF1だけずれるので、シェーディングは図5(G)となる。同様にSF2において図5(F)、SF3において図5(E)となる。以上のように、射出瞳距離が互いに異なる3つの図ではシェーディングも異なることがわかる。
以上により、ハーフミラー117が進入すると、シェーディングも変化し、その変化量は射出瞳距離により異なる。なお、その変化量は像高が高くなるにつれて、大きくなる。
次に、光線の波長の違いによりシェーディングが変化する理由を図6を用いて説明する。図6は光線の波長が異なる場合において、ハーフミラー117の進入による周辺画素に対応する枠及び瞳のずれを示す概念図である。図6(A)はハーフミラー117が進入状態の場合における光路を示したy−z平面の断面図である。一例として、枠面SF4が瞳面SPよりも撮像素子107に近い位置にある場合について説明する。ハーフミラー退避時における瞳中心はCPであり、枠中心はCF4である。光線L’PR、L’PBはそれぞれ赤色、青色の波長の光線であり、ハーフミラー進入状態におけるそれぞれ瞳中心C’PR、C’PBと周辺画素502を通る。光線L’F4R、L’F4Bはそれぞれ光線L’PR、L’PBと同波長の赤色、青色の光線であり、ハーフミラー進入状態におけるそれぞれ枠面SF4の枠中心C’F4R、C’F4Bと周辺画素502を通る。ここで、ハーフミラー等の光学部材の屈折率は波長により変化する。瞳中心C’PRの瞳ずれ量dPRと瞳中心C’PBの瞳ずれ量dPB、枠中心C’F4Rの枠ずれ量dF4Rと枠中心C’F4Bの枠ずれ量dF4Bは、dPR<dPB、dF4R<dF4Bとなる。それぞれの波長の違いによるずれ量の差dPB−dPRとdF4B−dF4Rを比較すると、dPB−dPR>dF4B−dF4Rが成立する。したがって、青色光線における瞳と枠のずれ量差ΔdF4B=dPB−dF4Bと赤色光線における瞳と枠のずれ量差ΔdF4R=dPR−dF4RにはΔdF4B>ΔdF4Rが成立する。
図6(B)乃至(E)は、赤色光線、青色光線が入射した場合における瞳と枠の位置関係を示す図である。図6(B)及び(C)は瞳と枠の全体図であり、図6(D)及び(E)は、ハーフミラー進入状態の枠内のA像の瞳の拡大図である。図6(B)中、赤色光線において、ハーフミラー117が進入状態のときのA像の瞳を512’PRA(瞳中心C’PRA)、B像の瞳を512’PRB(瞳中心C’PRB)と表し、枠を522’F4R(枠中心C’F4R)と表す。また、枠面SF4において、ハーフミラー117が退避状態のときの枠を522F4(枠中心CF4)と表す。同様に図6(C)中、青色光線において、ハーフミラー117が進入状態のときのA像の瞳を512’PBA(瞳中心C’PBA)、B像の瞳を512’PBB(瞳中心C’PBB)と表し、枠を522’F4B(枠中心C’F4B)と表す。前述したように、赤色光線、青色光線それぞれの瞳と枠のずれ量差には、ΔdF4B>ΔdF4Rが成立する。そのため、図6(D)に示す赤色波長のシェーディングと図6(E)に示す青色波長のシェーディングは互いに異なる。以上により、同じ射出瞳距離及び同じ像高であっても、波長の違いによりハーフミラー117の進入によるシェーディングの変化量は異なる。
よって、本実施形態に係る撮像装置においては、各画素の分光感度特性に応じて補正値算出係数を決定する必要がある。
以上説明したように、シェーディングは像高、射出瞳距離、絞り値または焦点検出画素の分光感度特性により変化する。そのため、ハーフミラー117の進入状態における補正値算出係数は、像高、射出瞳距離、絞り値及び焦点検出画素の分光感度特性の組合せによって決定される。これにより、像高、射出瞳距離、絞り値、および、焦点検出画素の分光感度特性に基づく第2のシェーディング補正値が算出可能となる。
このように、本発明では、ハーフミラーの状態(退避状態または進入状態)に応じて、補正値算出係数が異なる。よって、ハーフミラーの状態に応じて、シェーディングの補正値(第1のシェーディング補正値および第2のシェーディング補正値)も異なる。本発明のシェーディング補正手段として機能するCPU121は、ハーフミラーの状態が光路から退避している退避状態にあるときは、第1のシェーディング補正値を用いて信号を補正する。また、ハーフミラーの状態が光路に進入している進入状態にあるときは、第1のシェーディング補正値とは異なる第2のシェーディング補正値を用いて信号を補正する。
以上では、x方向に瞳分割を行う場合について説明した。次に、図7を用いてy方向に瞳分割を行う場合におけるハーフミラー117の進入による瞳と枠のずれについて説明する。図7はy方向に瞳分割した場合において、ハーフミラー117の進入による周辺画素503に対応する枠及び瞳のずれを示す概念図であり、図7(A)はハーフミラー117が進入状態の場合における光路を示したy−z平面の概念図である。一例として、枠面SF5が瞳面SPと一致している場合について説明する。ハーフミラー117が退避状態の場合のA像の瞳中心CP2A、B像の瞳中心CP2B及び枠中心CF5は、ハーフミラー117の進入により、それぞれ瞳中心C’P2A、瞳中心C’P2B及び枠中心C’F5にずれる。y方向に瞳分割を行う場合、A像、B像の瞳のy方向の位置が異なるため、それぞれの瞳中心CP2A、CP2B及び枠中心CF5から射出された光線のハーフミラー117への入射角は互いに異なる。そのため、A像の瞳ずれ量dP2Aと、B像の瞳ずれ量dP2B及びdF5も互いに異なる。
図7(B)乃至(D)は、瞳と枠の位置関係を示す図である。図7(B)は瞳と枠の全体図、図7(C)は枠内のA像の瞳の拡大図、図7(D)は枠内のB像の瞳の拡大図である。図7(C)及び(D)において、左図はハーフミラー117が退避状態、右図はハーフミラー117が進入状態の瞳を表す。図7(B)において、A像の瞳513P2A(瞳中心CP2A)、B像の瞳513P2B(瞳中心CP2B)及び枠523F5(枠中心CF5)は、ハーフミラー117の進入により、y方向にずれる。つまり、図7(B)に示すように、それぞれ瞳513’P2A(瞳中心C’P2A)、B像の瞳513’P2B(瞳中心C’P2B)及び枠523’F5(枠中心C’F5)にずれる。図7(C)及び(D)に着目すると、A像及びB像のいずれもハーフミラー117の進入によりシェーディングは変化していることがわかる。また、枠に対するA像の瞳とB像の瞳の移動量は互いに異なるため、シェーディングの変化量も異なるといえる。
以上のように本実施例によれば、ハーフミラー117が光路中に進入した場合であっても、像高、射出瞳距離、絞り値及び焦点検出画素の分光感度特性の組合せにより補正値を算出することで、高精度なシェーディング補正が可能となる。これにより、撮影レンズと撮像素子の間にハーフミラーが進入した場合であっても、高精度なシェーディング補正を実現することにより高精度な焦点検出が可能である。したがって、本実施例によれば、焦点検出に有利な撮像装置を提供することができる。
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。なお、上記の実施例では、シェーディング補正値決定手段として式(1)及び式(2)を用いて算出する方法を示した。しかし、本発明はこれに限定されず、撮像装置が像高、射出瞳距離情報及び絞り値情報等に対応する補正値を記憶することにより、算出を伴わずにシェーディング補正値を決定することも可能である。
本発明は、コンパクトデジタルカメラ、一眼レフカメラ、ビデオカメラなどの撮像装置に好適に利用できる。
107 撮像素子
117 ハーフミラー
121 CPU
117 ハーフミラー
121 CPU
Claims (8)
- 光路に進退可能に設けられたハーフミラーと、
撮像素子と、
前記撮像素子から出力される信号をシェーディング補正する補正手段と、を有し、
前記補正手段は、
前記ハーフミラーの状態が前記光路から退避している退避状態にあるときは、第1のシェーディング補正値を用いて前記信号を補正し、
前記ハーフミラーの状態が前記光路に進入している進入状態にあるときは、前記第1のシェーディング補正値とは異なる第2のシェーディング補正値を用いて前記信号を補正する、ことを特徴とする撮像装置。 - 前記補正手段は、前記ハーフミラーが前記進入状態にあるときは、前記撮像素子の画素の分光感度特性に基づく前記第2のシェーディング補正値を用いて前記信号を補正する、ことを特徴とする請求項1に記載の撮像装置。
- 前記第1のシェーディング補正値は、像高、射出瞳距離、および、絞り値に基づく値であり、
前記第2のシェーディング補正値は、像高、射出瞳距離、絞り値、および、前記撮像素子の画素の分光感度特性に基づく値である、ことを特徴とする請求項1または2に記載の撮像装置。 - 前記撮像素子は、光学系の異なる瞳領域を通過した光を光電変換して一対の信号を出力することが可能な画素を有することを特徴とする請求項1から3のいずれか1項に記載の撮像装置。
- 前記補正手段により補正された信号に基づいて焦点検出を行う焦点検出手段を有することを特徴とする請求項4に記載の撮像装置。
- 前記シェーディング補正値を算出するための近似関数の係数を記憶する記憶手段を有することを特徴とする請求項1から4のいずれか1項に記載の撮像装置。
- 請求項1から6のいずれか一項に記載の撮像装置と、
前記撮像装置に着脱可能な撮影レンズと、を有することを特徴とする撮像システム。 - 光路に進退可能に設けられたハーフミラーを駆動する駆動ステップと、
撮像素子から出力される信号をシェーディング補正する補正ステップと、を有し、
前記補正ステップは、
前記ハーフミラーの状態が前記光路から退避している退避状態にあるときは、第1のシェーディング補正値を用いて前記信号を補正し、
前記ハーフミラーの状態が前記光路に進入している進入状態にあるときは、前記第1のシェーディング補正値とは異なる第2のシェーディング補正値を用いて前記信号を補正する、ことを特徴とする撮像装置の制御方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014079833A JP6270601B2 (ja) | 2014-04-09 | 2014-04-09 | 撮像装置およびその制御方法、撮像システム |
US14/672,486 US9591204B2 (en) | 2014-04-09 | 2015-03-30 | Focus detecting unit, focus detecting method, image pickup apparatus, and image pickup system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014079833A JP6270601B2 (ja) | 2014-04-09 | 2014-04-09 | 撮像装置およびその制御方法、撮像システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015201774A JP2015201774A (ja) | 2015-11-12 |
JP6270601B2 true JP6270601B2 (ja) | 2018-01-31 |
Family
ID=54266129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014079833A Expired - Fee Related JP6270601B2 (ja) | 2014-04-09 | 2014-04-09 | 撮像装置およびその制御方法、撮像システム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9591204B2 (ja) |
JP (1) | JP6270601B2 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001177761A (ja) * | 1999-12-15 | 2001-06-29 | Minolta Co Ltd | デジタルカメラ |
JP2004191629A (ja) * | 2002-12-11 | 2004-07-08 | Canon Inc | 焦点検出装置 |
JP5424708B2 (ja) * | 2009-05-15 | 2014-02-26 | キヤノン株式会社 | 焦点検出装置 |
JP5610005B2 (ja) | 2013-02-12 | 2014-10-22 | 株式会社ニコン | 撮像装置 |
-
2014
- 2014-04-09 JP JP2014079833A patent/JP6270601B2/ja not_active Expired - Fee Related
-
2015
- 2015-03-30 US US14/672,486 patent/US9591204B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2015201774A (ja) | 2015-11-12 |
US9591204B2 (en) | 2017-03-07 |
US20150296127A1 (en) | 2015-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4961993B2 (ja) | 撮像素子、焦点検出装置および撮像装置 | |
JP5901246B2 (ja) | 撮像装置 | |
CN104104849B (zh) | 摄像设备及其控制方法 | |
JPWO2008032820A1 (ja) | 撮像素子および撮像装置 | |
JP6053347B2 (ja) | 撮像装置およびその制御方法ならびにプログラム | |
JP2009141390A (ja) | 撮像素子および撮像装置 | |
JP6298362B2 (ja) | 撮像装置及びその制御方法、及び撮像システム | |
JP6746359B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP4983271B2 (ja) | 撮像装置 | |
JP5067148B2 (ja) | 撮像素子、焦点検出装置および撮像装置 | |
JP4858179B2 (ja) | 焦点検出装置および撮像装置 | |
JP2015203783A (ja) | 撮像装置、制御装置、制御方法、プログラム、および、記憶媒体 | |
JP2018174542A (ja) | 撮像素子および撮像装置 | |
US20200092489A1 (en) | Optical apparatus, control method, and non-transitory computer-readable storage medium | |
JP2014215436A (ja) | 撮像装置、その制御方法、および制御プログラム | |
JP2018021971A (ja) | 焦点検出方法および撮像装置 | |
JP7037271B2 (ja) | 焦点検出装置および焦点検出方法、撮像装置、プログラム並びに記憶媒体 | |
JP2014194502A (ja) | 撮像装置および撮像システム | |
JP6270601B2 (ja) | 撮像装置およびその制御方法、撮像システム | |
JP5907668B2 (ja) | 撮像装置及び撮像素子 | |
JP6685769B2 (ja) | 情報処理装置、撮像装置及び情報処理方法 | |
JP2016157024A (ja) | 撮像装置およびその制御方法 | |
JP5338118B2 (ja) | 相関演算装置、焦点検出装置および撮像装置 | |
JP7019442B2 (ja) | 撮像装置およびその制御方法 | |
JP2017102240A (ja) | 画像処理装置および画像処理方法、撮像装置、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170410 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171226 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6270601 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |