JP6911136B2 - 撮像装置、情報取得方法及び情報取得プログラム - Google Patents

撮像装置、情報取得方法及び情報取得プログラム Download PDF

Info

Publication number
JP6911136B2
JP6911136B2 JP2019545091A JP2019545091A JP6911136B2 JP 6911136 B2 JP6911136 B2 JP 6911136B2 JP 2019545091 A JP2019545091 A JP 2019545091A JP 2019545091 A JP2019545091 A JP 2019545091A JP 6911136 B2 JP6911136 B2 JP 6911136B2
Authority
JP
Japan
Prior art keywords
pixel
interchangeable lens
image
image sensor
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019545091A
Other languages
English (en)
Other versions
JPWO2019065555A1 (ja
Inventor
貴嗣 青木
貴嗣 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2019065555A1 publication Critical patent/JPWO2019065555A1/ja
Application granted granted Critical
Publication of JP6911136B2 publication Critical patent/JP6911136B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14603Special geometry or disposition of pixel-elements, address-lines or gate-electrodes
    • H01L27/14607Geometry of the photosensitive area
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/34Systems for automatic generation of focusing signals using different areas in a pupil plane
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/12Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets
    • G03B17/14Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets interchangeably
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/673Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Structure And Mechanism Of Cameras (AREA)
  • Automatic Focus Adjustment (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)

Description

本発明は撮像装置、情報取得方法及び情報取得プログラムに係り、特に撮像装置に装着された交換レンズの情報を取得する技術に関する。
交換レンズを使用する撮像装置(カメラ)は、大別して2種類の交換レンズを装着することができる。
一方の交換レンズは、カメラ本体の通信規格に沿って製造され、カメラ本体との間で通信を行うことができる交換レンズである。この種の交換レンズがカメラ本体に装着された場合、カメラ本体は、装着された交換レンズとの間で通信を行い、交換レンズのレンズ情報(例えば、交換レンズ内の絞りの絞り値(F値)、フォーカスレンズのレンズ位置、交換レンズの焦点距離等)を完全に取得することができる。
他方の交換レンズは、カメラ本体の通信規格に沿って製造されておらず、カメラ本体との間で完全な通信を行うことができない交換レンズ(互換性のない交換レンズ)であり、サードパーティ製の交換レンズ、又はオールドレンズが該当する。尚、交換レンズとカメラ本体との間の通信プロトコル等が異なり、カメラ本体により一部のレンズ情報を取得することができるが、少なくともF値を取得することができないレンズは、本例では互換性のない他方の交換レンズに該当する。
特許文献1に記載の撮像装置は、イメージセンサの1つの画素が複数の領域に分割され、かつ撮影光学系の瞳像を複数の領域に結像させるオンチップマイクロレンズと、分割された複数の分割領域ごとに光電変換された信号をそれぞれ読み出す読出部とを有するイメージセンサを備え、交換レンズから絞り値に関する情報を取得できない場合に、複数の分割領域の信号に基づいて交換レンズの現在の絞り値を検出している。
即ち、イメージセンサの1つの画素を構成する複数の分割領域には、交換レンズの絞り値に対応する分割領域のみに被写体光が入射するため、複数の分割領域の信号により交換レンズの現在の絞り値を検出することができる。
また、特許文献2には、撮影レンズを交換可能なカメラにおいて、撮影レンズを通過した光を測定したTTL(through-the-lens)測光値と外光を直接測光した外光測光値との差に基づいて、撮影レンズに設定されている絞り値を得るカメラが開示されている。即ち、撮影レンズの種類に応じて、TTL測光値と外光測光値との差により絞り値を決定するテーブルを準備しておき、撮影レンズの種類を入力することでテーブルを選択する。そして、選択したテーブルからTTL測光値と外光測光値との差に対応する絞り値を読み出すようにしている。
更に、特許文献3には、イメージセンサの光軸方向における位置に応じたコントラスト値の変化からレンズ鏡筒の絞り値を推定する技術が開示されている。
即ち、予め絞り値に対応するコントラスト形状(イメージセンサの光軸方向における位置の変化に対するコントラスト値の変化)を決めたテーブルを有し、コントラスト検出部がコントラスト形状を判定し、判定したコントラスト形状に基づいてテーブルから対応するコントラスト形状を有する絞り値を読み出すようにしている。
国際公開第2015−045829号公報 特開2001−147477号公報 特開2016−145958号公報
特許文献1に記載の発明は、絞り値を推定するために特殊なイメージセンサを備える必要がある。即ち、イメージセンサの1つの画素が複数の領域に分割され、かつ撮影光学系の瞳像を複数の領域に結像させるオンチップマイクロレンズと、分割された複数の分割領域ごとに光電変換された信号をそれぞれ読み出す読出部とを有する、特殊なイメージセンサを備える必要がある。
また、特許文献2に記載の発明は、TTL(through-the-lens)測光値と外光測光値とを取得する必要があり、更にTTL測光値と外光測光値との差により絞り値を決定するためのテーブルを撮影レンズの種類毎に準備する必要がある。したがって、テーブルが不明な未知の交換レンズに対しては、特許文献2に記載の発明は適用できない。
特許文献3に記載の発明は、イメージセンサの光軸方向における位置に応じたコントラスト値の変化からレンズ鏡筒の絞り値を推定しているが、絞り値を推定する場合に撮像される被写体のコントラスト(コントラストの高低)が、イメージセンサの光軸方向における位置に応じたコントラスト値の変化に影響し、コントラスト形状からは絞り値を正しく推定することができないという問題がある。
本発明はこのような事情に鑑みてなされたもので、互換性のない交換レンズが撮像装置に装着された場合であっても、その交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報を簡単かつ精度よく取得することができる撮像装置、情報取得方法及び情報取得プログラムを提供することを目的とする。
上記目的を達成するために本発明の一の態様に係る撮像装置は、第1の画素と、第1の画素とは入射角特性が異なる第2の画素とを有するイメージセンサと、交換レンズが脱着可能な装着部と、装着部に装着された交換レンズを通じて被写体光が入射するイメージセンサの第1の画素の出力及び第2の画素の出力をそれぞれ取得する画素情報取得部と、画素情報取得部により取得した第1の画素の出力と第2の画素の出力との比を算出する演算部と、演算部により算出された比に基づいて交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報を取得する情報取得部と、を備える。
本発明の一の態様によれば、入射角特性が異なるイメージセンサ上の第1の画素と第2の画素との各出力の比と、交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報とが対応関係を有することに着目し、第1の画素の出力と第2の画素の出力との比を算出し、算出した比に基づいてイメージセンサに対する光線角度に関連する情報を取得するようにしている。
本発明の他の態様に係る撮像装置において、イメージセンサは、交換レンズのそれぞれ異なる領域を通過した各被写体光を瞳分割により選択的に受光する第1の位相差画素及び第2の位相差画素を有し、第1の画素は、第1の位相差画素であり、第2の画素は、第2の位相差画素であることが好ましい。像面位相差AF(Autofocus)用のイメージセンサは、第1の位相差画素及び第2の位相差画素を有しており、既存のイメージセンサを適用することができる。
本発明の更に他の態様に係る撮像装置において、イメージセンサは、交換レンズのそれぞれ異なる領域を通過した各被写体光を瞳分割により選択的に受光する第1の位相差画素及び第2の位相差画素と、各被写体光をそれぞれ受光する通常画素とを有し、第1の画素は、第1の位相差画素又は第2の位相差画素であり、第2の画素は、通常画素であることが好ましい。
第1の位相差画素と第2の位相差画素との入射角特性が完全に対称の場合、イメージセンサに対する光線角度が変化しても両者の各出力の比が変化しないが、第1の位相差画素又は第2の位相差画素と通常画素とは、入射角特性が対称にならないため、イメージセンサに対する光線角度が変化すると、両者の各出力の比が変化する。したがって、第1の位相差画素又は第2の位相差画素と通常画素との各出力の比を求めることが好ましい。
本発明の更に他の態様に係る撮像装置において、イメージセンサに対する光線角度に関連する情報は、交換レンズの絞り値、交換レンズの開口数、又はイメージセンサに対する光線角度である。尚、絞り値、開口数及び光線角度は、相互に関係しており、いずれか1つの情報が得られれば、その情報から他の情報は算出(換算)することができる。
本発明の更に他の態様に係る撮像装置において、イメージセンサに対する光線角度に関連する情報は、交換レンズの絞り値又は交換レンズの開口数であり、第1の画素の出力と第2の画素の出力との比を、交換レンズの絞り値毎又は交換レンズの開口数毎に記憶する記憶部を備え、情報取得部は、演算部により算出された比に基づいて記憶部から比に対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を交換レンズの現在の絞り値又は開口数として取得することが好ましい。
尚、演算部により算出された比が記憶部に記憶されていない場合には、記憶部に記憶されている比のうちで、演算部により算出された比に最も近い比に対応する絞り値又は開口数を読み出して、交換レンズの現在の絞り値又は開口数としてもよいし、演算部により算出された比と、記憶部に記憶されている前後(算出された比の前後)の比とに基づいて対応する絞り値又は開口数を補間し、交換レンズの現在の絞り値又は開口数としてもよい。
本発明の更に他の態様に係る撮像装置において、イメージセンサに対する光線角度に関連する情報は、交換レンズの絞り値又は交換レンズの開口数であり、第1の画素の出力と第2の画素の出力との比であって、像高毎の比を示す第1のテーブルを、交換レンズの絞り値又は交換レンズの開口数毎に記憶する記憶部を備え、画素情報取得部は、イメージセンサの複数の像高における第1の画素の出力及び第2の画素の出力を取得し、演算部は、取得した複数の像高毎の第1の画素の出力と第2の画素の出力との比を算出し、像高毎の比を示す第2のテーブルを取得し、情報取得部は、取得した第2のテーブルに基づいて、記憶部から第2のテーブルと一致し又は最も近似する第1のテーブルに対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を交換レンズの現在の絞り値又は開口数として取得することが好ましい。
本発明の更に他の態様によれば、像高毎の比を示す第1のテーブル(複数の第1のテーブル)と、演算部により算出した像高毎の比を示す第2のテーブルとを比較し、第2のテーブルと一致し又は最も近似する第1のテーブルを抽出し、抽出した第1のテーブルに対応付けられている絞り値又は開口数を取得するため、より精度の高い交換レンズの絞り値又は開口数を取得することができる。また、この場合、第1の画素及び第2の画素として、第1の位相差画素及び第2の位相差画素を使用しても、イメージセンサの中心部では、第1の位相差画素と第2の位相差画素とは入射角特性が完全に対称になっても、像高が異なると、第1の位相差画素と第2の位相差画素とは入射角特性が対称にならなくなる。即ち、第1の画素及び第2の画素として、第1の位相差画素及び第2の位相差画素を使用しても、交換レンズの現在の絞り値又は開口数を取得することができる。
本発明の更に他の態様に係る撮像装置において、演算部は、取得した複数の像高毎の第1の画素及び第2の画素のうちの飽和していない第1の画素の出力と第2の画素の出力との比を算出し、像高毎の比を示す第2のテーブルを取得することが好ましい。第1の画素又は第2の画素が飽和していると、第1の画素の出力と第2の画素の出力との比を正しく算出することができないからである。
本発明の更に他の態様に係る撮像装置において、被写体のコントラストを検出するコントラスト検出部を備え、演算部は、コントラスト検出部により検出された被写体のコントラストに応じて、被写体のコントラストが高い程、比の算出に使用する第1の画素及び第2の画素の数を多くすることが好ましい。被写体のコントラストが高い場合、第1の画素の出力と第2の画素の出力との比が、被写体のコントラストの影響を受ける。したがって、この場合には、比の算出に使用する第1の画素及び第2の画素の数を多くすることで、算出される比を平均化している。第1の画素及び第2の画素の数を増減する場合、イメージセンサから第1の画素及び第2の画素を抽出する領域を拡縮する方法と、抽出する領域は同じで第1の画素及び第2の画素を抽出する間隔(間引き率)を変える方法とが考えられる。
本発明の更に他の態様に係る撮像装置において、交換レンズとの間で通信を行う通信部と、装着された交換レンズから通信部を介して交換レンズの絞り値又は開口数を取得できない場合に画素情報取得部、演算部及び情報取得部をそれぞれ動作させる制御部と、を備えることが好ましい。自社の交換レンズ又は互換性のある交換レンズで、交換レンズと撮像装置本体との間で通信により情報をやり取りできる場合、通信により交換レンズの情報(交換レンズの絞り値又は開口数)を取得する方が簡便だからである。したがって、装着された交換レンズから通信部を介して交換レンズの絞り値又は開口数を取得できない場合に限り、画素情報取得部、演算部及び情報取得部をそれぞれ動作させ、交換レンズの絞り値又は開口数を取得するようにしている。
本発明の更に他の態様に係る撮像装置において、通信部を介して取得した交換レンズの絞り値又は開口数若しくは情報取得部により取得した交換レンズの絞り値又は開口数を使用して被写体の明るさを算出する測光部を備えることが好ましい。交換レンズの絞り値又は開口数が分かると、「絞り値又は開口数から換算される絞り値」、「シャッタースピード」、及び「画像の輝度(明るさ)」の情報を元に、被写体の明るさ(画像の輝度ではなく真の被写体の明るさ)を算出することができる。また、真の被写体の明るさは、シーン認識(屋外、屋内の判定等)に利用され、オートホワイトバランス調整等に利用することができる。
本発明の更に他の態様に係る撮像装置において、イメージセンサの第1の位相差画素及び第2の位相差画素の出力に基づいて位相ずれ量を検出する位相ずれ量検出部と、イメージセンサに対する光線角度に関連する情報と位相ずれ量とに基づいてデフォーカス量を算出するデフォーカス量算出部と、算出されたデフォーカス量に基づいてイメージセンサを移動させる焦点調節部と、を備えることが好ましい。
これによれば、イメージセンサを移動させることで、交換レンズを駆動することなく位相差AFを行うことができ、特に互換性のない交換レンズが装着された場合でも位相差AFを行うことができる。
本発明の更に他の態様に係る撮像装置において、情報取得モードを設定するモード設定部を備え、画素情報取得部、演算部、及び情報取得部は、それぞれモード設定部により情報取得モードが設定された状態で撮像指示部から撮像の指示が入力された場合に動作することが好ましい。
情報取得モードが設定された場合、イメージセンサに対する光線角度に関連する情報を取得するために、本撮像前に予めユーザに被写体を撮像して貰う必要がある。情報取得モードが設定されることで、ユーザは、良好な光線角度に関連する情報を取得するため撮像を意識して被写体(例えば、コントラストが低い被写体、飽和が発生しない被写体等)を撮像することができる。尚、情報取得モードは、互換性のない交換レンズの絞りを調整した場合には、その調整毎にユーザが設定することになるが、互換性のない交換レンズが装着された場合には、それを検出して自動的に設定してもよい。
本発明の更に他の態様に係る撮像装置において、撮像指示部から撮像の指令が入力されると、イメージセンサを介して画像データを取得する画像取得部と、取得した画像データを格納する画像ファイルを作成し、画像ファイルを記録媒体に記録する記録部と、を備え、記録部は、画像ファイルのヘッダに、情報取得部が取得したイメージセンサに対する光線角度に関連する情報を記録することが好ましい。
更に他の態様に係る発明は、イメージセンサ上の第1の画素とイメージセンサ上の第2の画素であって、第1の画素とは入射角特性が異なる第2の画素とを有するイメージセンサを備える撮像装置における情報取得方法であって、撮像装置に装着された交換レンズを通じて被写体光が入射するイメージセンサの第1の画素の出力及び第2の画素の出力をそれぞれ取得する画素情報取得ステップと、取得した第1の画素の出力と第2の画素の出力との比を算出する演算ステップと、算出された比に基づいて交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報を取得する情報取得ステップと、を含む。
本発明の他の態様に係る情報取得方法において、撮像装置は、第1の画素の出力と第2の画素の出力との比を、交換レンズの絞り値毎又は交換レンズの開口数毎に記憶する記憶部を備え、情報取得ステップは、算出された比に基づいて記憶部から比に対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を交換レンズの現在の絞り値又は開口数として取得することが好ましい。
本発明の更に他の態様に係る情報取得方法において、撮像装置は、第1の画素の出力と第2の画素の出力との比であって、像高毎の比を示す第1のテーブルを、交換レンズの絞り値毎又は交換レンズの開口数毎に記憶する記憶部を備え、画素情報取得ステップは、イメージセンサの複数の像高における第1の画素の出力及び第2の画素の出力を取得し、演算ステップは、取得した複数の像高毎の第1の画素の出力と第2の画素の出力との比を算出し、像高毎の比を示す第2のテーブルを取得し、情報取得ステップは、取得した第2のテーブルに基づいて記憶部から第2のテーブルと一致し又は最も近似する第1のテーブルに対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を交換レンズの現在の絞り値又は開口数として取得することが好ましい。
本発明の更に他の態様に係る情報取得方法において、撮像装置は、交換レンズとの間で通信を行う通信部を備え、装着された交換レンズから通信部を介して交換レンズの絞り値又は開口数を取得するステップと、通信部を介して交換レンズの絞り値又は開口数を取得できない場合に画素情報取得ステップ、演算ステップ及び情報取得ステップの処理を実行して交換レンズの現在の絞り値又は開口数を取得することが好ましい。
更に他の態様に係る発明は、イメージセンサ上の第1の画素とイメージセンサ上の第2の画素であって、第1の画素とは入射角特性が異なる第2の画素とを有するイメージセンサを備える撮像装置に適用される情報取得プログラムであって、撮像装置に装着された交換レンズを通じて被写体光が入射するイメージセンサの第1の画素の出力及び第2の画素の出力をそれぞれ取得する機能と、取得した第1の画素の出力と第2の画素の出力との比を算出する機能と、算出された比に基づいて交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報を取得する機能と、を撮像装置に実現させる。
本発明によれば、互換性のない交換レンズが撮像装置に装着された場合であっても、その交換レンズを通じて被写体光がイメージセンサに入射する際の、イメージセンサに対する光線角度に関連する情報を簡単かつ精度よく取得することができる。
図1は本発明に係る撮像装置を斜め前方から見た斜視図 図2は撮像装置の背面図 図3は撮像装置の内部構成の実施形態を示すブロック図であり、互換性のない交換レンズが装着された状態を示す図 図4は撮像装置の内部構成の実施形態を示すブロック図であり、互換性のある交換レンズが装着された状態を示す図 図5はイメージセンサの構成例を示す図 図6はイメージセンサの位相差画素行の一部の断面を示す概略図 図7は第1の位相差画素PA及び第2の位相差画素PBの構成を示す要部拡大図 図8はイメージセンサの撮像領域における、第1の位相差画素PA及び第2の位相差画素PBが配置される領域の一例を示す図 図9はイメージセンサの撮像領域における、第1の位相差画素及び第2の位相差画素が配置される領域の他の例を示す図 図10はイメージセンサの撮像領域における、第1の位相差画素PA及び第2の位相差画素PBが配置される領域の更に他の例を示す図 図11はAF制御部の構成例を示す図 図12イメージセンサの通常画素(G画素)、第1の位相差画素及び第2の位相差画素の入射角特性を示すグラフ 図13は撮像光学系の光軸と平行な主光線を有するF値の異なる光束が、イメージセンサに入射する状態を示す図 図14はイメージセンサのG画素、第1の位相差画素PA及び第2の位相差画素PBの入射角特性を示すグラフと、F値がF2、F4の場合における、イメージセンサの中心部の画素に入射する光束の角度範囲とを示す図 図15は交換レンズの現在のF値を取得する本体側CPUの機能を示すブロック図 図16はF値取得に使用する第1の位相差画素PA及び第2の位相差画素PBのイメージセンサ上の像高を示す図 図17はイメージセンサのG画素、第1の位相差画素PA及び第2の位相差画素PBの入射角特性を示すグラフと、F値がF2、F4の場合における、イメージセンサの像高の高い或る画素に入射する光束の角度範囲とを示す図 図18はイメージセンサの像高の異なるセンサ位置毎に入射角特性が異なる2つの画素の出力を取得する例を示す図 図19は交換レンズの絞りが開放側にある場合のセンサ位置毎の比の変化を示すグラフ 図20は交換レンズの絞りが小絞り側にある場合のセンサ位置毎の比の変化を示すグラフ 図21はレンズの開口径D、開口径の半径r、焦点距離f及び光線角度θの関係を示す図 図22は本発明に係る情報取得方法の第1の実施形態を示すフローチャート 図23は本発明に係る情報取得方法の第2の実施形態を示すフローチャート
以下、添付図面に従って本発明に係る撮像装置、情報取得方法及び情報取得プログラムの好ましい実施の形態について説明する。
<撮像装置の外観>
図1は撮像装置を斜め前方から見た斜視図であり、図2は撮像装置の背面図である。
図1に示すように撮像装置10は、交換レンズ100と、交換レンズ100が着脱可能なカメラ本体200とから構成されたミラーレスのデジタル一眼カメラである。
図1において、カメラ本体200の前面には、交換レンズ100が着脱可能な本体マウント260(装着部)と、光学ファインダのファインダ窓20等が設けられ、カメラ本体200の上面には、主としてシャッタレリーズスイッチ22、シャッタースピードダイヤル23、露出補正ダイヤル24、電源レバー25、及び内蔵フラッシュ30が設けられている。
また、図2に示すようにカメラ本体200の背面には、主として液晶ディスプレイ等からなるモニタ216、光学ファインダの接眼部26、MENU/OKキー27、十字キー28、再生ボタン29等が設けられている。
モニタ216は、撮影モード時にライブビュー画像を表示したり、再生モード時に撮像した画像を再生表示する他、各種のメニュー画面を表示する表示部として機能する。MENU/OKキー27は、モニタ216の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するOKボタンとしての機能とを兼備した操作キーである。十字キー28は、上下左右の4方向の指示を入力する操作部であり、メニュー画面から項目を選択したり、各メニューから各種設定項目の選択を指示したりするボタンとして機能する。また、十字キー28の上キー及び下キーは撮像時のズームスイッチあるいは再生モード時の再生ズームスイッチとして機能し、左キー及び右キーは再生モード時のコマ送り(順方向及び逆方向送り)ボタンとして機能する。 また、MENU/OKキー27、十字キー28、及びモニタ216に表示されるメニュー画面を使用することで、1枚の静止画を撮像する通常撮影モードの他に、静止画を連続撮影する連写モードを含む各種の撮影モードの設定を行うことができる。尚、連写モードを設定する場合、連写速度(例えば、約8コマ/秒、約3コマ/秒)の設定が可能である。
再生ボタン29は、撮像記録した静止画又は動画をモニタ216に表示させる再生モードに切り替えるためのボタンである。
<撮像装置の内部構成>
[交換レンズ]
<互換性のない交換レンズ>
図3は、撮像装置10の内部構成の実施形態を示すブロック図である。
図3に示す交換レンズ100は、カメラ本体200の本体マウント260に装着可能なレンズマウント160を備えているが、カメラ本体200に対して互換性のない交換レンズである。尚、図示しないマウントアダプタを介してカメラ本体200に装着可能な交換レンズも含む。
交換レンズ100の撮像光学系102は、フォーカスレンズを含むレンズ群104及び絞り108を含む。
レンズ群104のフォーカスレンズは、図示しないフォーカスリングを手動操作することにより、至近から無限遠に対応する範囲内で移動することができる。
絞り108は、図示しない絞りリングを手動操作することにより、最大絞りから最小絞りまで、1ステップずつ、又は1/3ステップずつ、又は連続的に絞り開口の大きさを変更することができる。これにより、最大絞り(例えば、絞り値(F値)=F1.2)から最小絞り(例えば、F値=F22)の範囲内でF値を設定することができる。
<互換性のある交換レンズ>
図4は、撮像装置10の内部構成の第2の実施形態を示すブロック図である。
図4に示す交換レンズ300は、カメラ本体200の通信規格に沿って製造されたものであり、後述するようにカメラ本体200との間で通信を行うことができる、互換性のある交換レンズである。
この交換レンズ300は、撮像光学系302、フォーカスレンズ制御部316、絞り制御部318、レンズ側CPU(Central Processing Unit)320、フラッシュROM(Read Only Memory)326、レンズ側通信部350、及びレンズマウント360を備える。
交換レンズ300の撮像光学系302は、フォーカスレンズを含むレンズ群304及び絞り308を含む。
フォーカスレンズ制御部316は、レンズ側CPU320からの指令に従って、フォーカスレンズのフォーカス位置を制御する。絞り制御部318は、レンズ側CPU320からの指令に従って絞り308を制御する。
レンズ側CPU320は、交換レンズ300を統括制御するもので、ROM324及びRAM(Random Access Memory)322を内蔵している。
フラッシュROM326は、カメラ本体200からダウンロードされたプログラム等を格納する不揮発性のメモリである。
レンズ側CPU320は、ROM324又はフラッシュROM326に格納された制御プログラムに従い、RAM322を作業領域として、交換レンズ300の各部を統括制御する。
レンズ側通信部350は、レンズマウント360がカメラ本体200の本体マウント260に装着されている状態で、レンズマウント360に設けられた複数の信号端子(レンズ側信号端子)を介してカメラ本体200との通信を行う。即ち、レンズ側通信部350は、レンズ側CPU320の指令に従って、レンズマウント360及び本体マウント260を介して接続されたカメラ本体200の本体側通信部250との間で、リクエスト信号、回答信号の送受信(双方向通信)を行い、撮像光学系302の各光学部材のレンズ情報(フォーカスレンズのフォーカス位置情報、焦点距離情報及び絞り情報等)を、カメラ本体200に通知する。
また、交換レンズ300は、フォーカスレンズのフォーカス位置情報、及び絞り情報を検出する検出部(図示せず)を備えている。ここで、絞り情報とは、絞り308の絞り値(F値)、絞り308の開口径等を示す情報である。以下、本例では、絞り情報としてF値を使用する。
レンズ側CPU320は、カメラ本体200からのレンズ情報のリクエストに応えるために、検出されたフォーカス位置情報及び絞り情報を含む各種のレンズ情報をRAM322に保持することが好ましい。また、レンズ情報は、カメラ本体200からのレンズ情報の要求があると検出され、又は光学部材が駆動されるときに検出され、又は一定の周期(動画のフレーム周期よりも十分に短い周期)で検出され、検出結果を保持することができる。
[カメラ本体]
図3又は図4に示す撮像装置10を構成するカメラ本体200は、イメージセンサ201(画像取得部)、イメージセンサ制御部202、アナログ信号処理部203、A/D(Analog/Digital)変換器204、画像入力コントローラ205、デジタル信号処理部206、RAM207、圧縮伸張処理部208、焦点調節部209、メディア制御部210(記録部)、メモリカード212(記録媒体)、表示制御部214、モニタ216、本体側CPU220、操作部222、時計部224、フラッシュROM226、ROM228、AF制御部230、明るさ検出部232(測光部)、ホワイトバランス補正部234、無線通信部236、GPS(Global Positioning System)受信部238、電源制御部240、バッテリ242、本体側通信部250、本体マウント260、内蔵フラッシュ30(図1)を構成するフラッシュ発光部270、フラッシュ制御部272、フォーカルプレーンシャッタ(FPS:focal-plane shutter)280、及びFPS制御部296を備える。
<イメージセンサの構成>
イメージセンサ201は、CMOS(Complementary Metal-Oxide Semiconductor)型のカラーイメージセンサにより構成されている。尚、イメージセンサ201は、CMOS型に限らず、XYアドレス型、又はCCD(Charge Coupled Device)型のイメージセンサでもよい。
イメージセンサ201は、図5に示すようにx方向(水平方向)及びy方向(垂直方向)に二次元的に配列された光電変換素子(フォトダイオード)で構成される複数の画素上に、赤(R)、緑(G)及び青(B)のカラーフィルタが、周期的色配列(図5に示す例では、一般的なベイヤ配列)で配設され、各フォトダイオード上にはマイクロレンズが配置されている。
また、イメージセンサ201は、位相差画素(第1の位相差画素PA,第2の位相差画素PB)と撮像用の通常画素(位相差画素以外の画素)が配置されている。
ベイヤ配列を有するイメージセンサ201において、通常画素のみが水平方向(行方向)に配置された通常画素行は、Rフィルタを有する画素(R画素)とGフィルタを有する画素(G画素)とが行方向に交互に配置されたRG行と、G画素とBフィルタを有する画素(B画素)とが行方向に交互に配置されたGB行とがある。また、RG行とGB行とは、垂直方向(列方向)に交互に配置されている。
また、イメージセンサ201は、第1の位相差画素PA及び第2の位相差画素PBが設けられた位相差画素行と、通常画素のみが設けられている通常画素行とを有している。
イメージセンサ201の位相差画素行は、ベイヤ配列の特定のGB行において、一対の第1の位相差画素PA及び第2の位相差画素PBと1つの通常画素の3画素を1周期として周期的に行方向に配置されて構成されている。したがって、位相差画素行には、G画素とB画素とが行方向に2画素(一対の第1の位相差画素PA及び第2の位相差画素PB)置きに交互に配置されている。尚、本例の位相差画素行は、ベイヤ配列のGB行に設けられているが、これに限らず、RG行に設けるようにしてもよい。
周期的色配列は、ベイヤ配列に限らず、X−Trans(登録商標)配列等の他のカラーフィルタ配列でもよい。
図6は、イメージセンサ201の位相差画素行の一部の断面を示す概略図である。図6には、一対の第1の位相差画素PA及び第2の位相差画素PBと、これらの画素に隣接する通常画素であるB画素とG画素との4つの画素が示されている。第1の位相差画素PA及び第2の位相差画素PBには、それぞれ入射光を制限する遮光膜MA,MBが設けられている。
図7は第1の位相差画素PA及び第2の位相差画素PBの構成を示す要部拡大図である。
図7に示すように第1の位相差画素PAのフォトダイオードPDの前面側(マイクロレンズML側)には、遮光膜MAが配設され、一方、第2の位相差画素PBのフォトダイオードPDの前面側には、遮光膜MBが配設される。マイクロレンズML及び遮光膜MA、MBは瞳分割機能を有し、図7上で、遮光膜MAは、フォトダイオードPDの受光面の左半分を遮光する。そのため、第1の位相差画素PAには、撮像光学系102の射出瞳を通過する光束のうちの光軸の左側を通過する光束のみが選択的に受光される。また、カラーフィルタCFとして、GフィルタがマイクロレンズMLの下方に配置されている。
一方、遮光膜MBは、第2の位相差画素PBのフォトダイオードPDの受光面の右半分を遮光する。そのため、第2の位相差画素PBには、撮像光学系102の射出瞳を通過する光束のうちの光軸の右側を通過する光束のみが選択的に受光される。このように、瞳分割機能を有するマイクロレンズML及び遮光膜MA、MBにより、射出瞳を通過する光束が左右に分割され、それぞれ第1の位相差画素PA及び第2の位相差画素PBに入射する。
図8から図10は、それぞれイメージセンサ201の撮像領域における、第1の位相差画素PA及び第2の位相差画素PBが配置される領域の例を示している。図8から図10において、第1の位相差画素PA及び第2の位相差画素PBが配置される領域は、斜線で示されている。
図3に戻って、本例のイメージセンサ201は、光軸方向に移動可能に設けられており、焦点調節部209によりイメージセンサ201の位置が調節可能になっている。したがって、イメージセンサ201の光軸方向の位置を制御することで、イメージセンサ201の結像面に被写体像を合焦させることができる。
交換レンズ100の撮像光学系102によってイメージセンサ201の受光面に結像された被写体の光学像は、イメージセンサ201によって電気信号に変換される。イメージセンサ201の各画素には、入射する光量に応じた電荷が蓄積され、イメージセンサ201からは各画素に蓄積された電荷量に応じた電気信号が画像信号として読み出される。
イメージセンサ制御部202は、本体側CPU220の指令に従って、イメージセンサ201から画像信号の読み出し制御を行う。また、イメージセンサ制御部202は、本体側CPU220からの電子シャッタ制御信号により、イメージセンサ201の各画素に蓄積された電荷を同時に排出させて(一斉にリセットして)、露光を開始させる電子シャッタ機能を有する。
アナログ信号処理部203は、イメージセンサ201で被写体を撮像して得られたアナログの画像信号に対して、各種のアナログ信号処理を施す。アナログ信号処理部203は、サンプリングホールド回路、色分離回路、AGC(Automatic Gain Control)回路等を含んで構成されている。AGC回路は、撮像時の感度(ISO感度(ISO:International Organization for Standardization))を調整する感度調整部として機能し、入力する画像信号を増幅する増幅器のゲインを調整し、画像信号の信号レベルが適切な範囲に入るようにする。A/D変換器204は、アナログ信号処理部203から出力されたアナログの画像信号をデジタルの画像信号に変換する。
静止画又は動画の撮像時にイメージセンサ201、アナログ信号処理部203、及びA/D変換器204を介して出力されるRGBの画素毎の画像データ(モザイク画像データ)は、画像入力コントローラ205からRAM207に入力され、一時的に記憶される。尚、イメージセンサ201がCMOS型イメージセンサである場合、アナログ信号処理部203及びA/D変換器204は、イメージセンサ201内に内蔵されていることが多い。
デジタル信号処理部206は、RAM207に格納されている画像データに対して、各種のデジタル信号処理を施す。デジタル信号処理部206は、RAM207に記憶されている画像データを適宜読み出し、読み出した画像データに対してオフセット処理、感度補正を含むゲイン・コントロール処理、ガンマ補正処理、デモザイク処理(デモザイキング処理、同時化処理とも言う)、RGB/YCrCb変換処理等のデジタル信号処理を行い、デジタル信号処理後の画像データを再びRAM207に記憶させる。尚、デモザイク処理とは、例えば、RGB3色のカラーフィルタからなるイメージセンサの場合、RGBからなるモザイク画像から画素毎にRGB全ての色情報を算出する処理であり、モザイクデータ(点順次のRGBデータ)から同時化されたRGB3面の画像データを生成する。
RGB/YCrCb変換処理は、同時化されたRGBデータを輝度データ(Y)及び色差データ(Cr、Cb)に変換する処理である。
圧縮伸張処理部208は、静止画又は動画の記録時に、一旦RAM207に格納された非圧縮の輝度データY及び色差データCb,Crに対して圧縮処理を施す。静止画の場合には、例えばJPEG(Joint Photographic coding Experts Group)形式で圧縮し、動画の場合には、例えばH.264形式で圧縮する。圧縮伸張処理部208により圧縮された画像データは、メディア制御部210を介してメモリカード212に記録される。また、圧縮伸張処理部208は、再生モード時にメディア制御部210を介してメモリカード212から得た圧縮された画像データに対して伸張処理を施し、非圧縮の画像データを生成する。
メディア制御部210は、圧縮伸張処理部208で圧縮された画像データを、メモリカード212に記録する制御を行う。また、メディア制御部210は、メモリカード212から、圧縮された画像データを読み出す制御を行う。
表示制御部214は、RAM207に格納されている非圧縮の画像データを、モニタ216に表示させる制御を行う。モニタ216は、例えば液晶表示デバイス、有機エレクトロルミネッセンス表示デバイスなどの表示デバイスによって構成されている。
モニタ216にライブビュー画像を表示させる場合には、デジタル信号処理部206で連続的に生成されたデジタルの画像信号が、RAM207に一時的に記憶される。表示制御部214は、このRAM207に一時記憶されたデジタルの画像信号を表示用の信号形式に変換して、モニタ216に順次出力する。これにより、モニタ216に撮像画像がリアルタイムに表示され、モニタ216を電子ビューファインダとして使用することができる。
シャッタレリーズスイッチ22は、撮像の指示を入力するための撮像指示部であり、いわゆる「半押し」と「全押し」とからなる2段ストローク式のスイッチで構成されている。
静止画撮影モードの場合、シャッタレリーズスイッチ22が半押しされることによってS1オンの信号、半押しから更に押し込む全押しがされることによってS2オンの信号が出力され、S1オン信号が出力されると、本体側CPU220は、オートフォーカス(AF:Autofocus)制御及び自動露出制御(AE(Auto Exposure)制御)などの撮像準備処理を実行し、S2オン信号が出力されると、静止画の撮像処理及び記録処理を実行する。尚、AF制御及びAE制御は、それぞれ操作部222によりオートモードが設定されている場合に自動的に行われ、マニュアルモードが設定されている場合には、AF制御及びAE制御が行われないことは言うまでもない。
また、動画撮影モードの場合、シャッタレリーズスイッチ22が全押しされることによってS2オンの信号が出力されると、カメラ本体200は、動画の記録を開始する動画記録モードになり、動画の画像処理及び記録処理を実行し、その後、シャッタレリーズスイッチ22が再び全押しされることによってS2オンの信号が出力されると、カメラ本体200は、スタンバイ状態になり、動画の記録処理を一時停止する。
尚、シャッタレリーズスイッチ22は半押しと全押しとからなる2段ストローク式のスイッチの形態に限られず、1回の操作でS1オンの信号、S2オンの信号を出力しても良く、それぞれ個別のスイッチを設けてS1オンの信号、S2オンの信号を出力しても良い。
また、タッチ式パネル等により操作指示を行う形態では、これら操作手段としてタッチ式パネルの画面に表示される操作指示に対応する領域をタッチすることで操作指示を出力するようにしても良く、撮像準備処理や撮像処理を指示するものであれば操作手段の形態はこれらに限られない。
撮像により取得された静止画又は動画は、圧縮伸張処理部208により圧縮され、圧縮された画像データは、撮像日時、GPS情報、撮像条件(F値、シャッタースピード、ISO感度等)の所要の付属情報が、ヘッダに付加された画像ファイルとされた後、メディア制御部210を介してメモリカード212に格納される。
本体側CPU220は、カメラ本体200全体の動作及び交換レンズ100の光学部材の駆動等を統括制御するもので、シャッタレリーズスイッチ22を含む操作部222等からの入力に基づき、カメラ本体200の各部及び交換レンズ300を制御する。
時計部224は、タイマとして、本体側CPU220からの指令に基づいて時間を計測する。また、時計部224は、カレンダとして、現在の年月日及び時刻を計測する。
フラッシュROM226は、読み取り及び書き込みが可能な不揮発性メモリであり、設定情報を記憶する。
ROM228には、本体側CPU220が実行するカメラ制御プログラム、イメージセンサ201の欠陥情報、画像処理等に使用する各種のパラメータやテーブルが記憶されている。本体側CPU220は、ROM228に格納されたカメラ制御プログラムに従い、RAM207を作業領域としながらカメラ本体200の各部、及び交換レンズ300を制御する。
AF制御部230は、位相差AFの制御に必要なデフォーカス量を算出し、算出したデフォーカス量に基づいて焦点調節部209を介してイメージセンサ201の位置を制御する。
AF制御部230は、図11に示すように位相ずれ量検出部230A及びデフォーカス量算出部230Bを含む。
位相ずれ量検出部230Aは、イメージセンサ201のAF領域内の第1の位相差画素PAの出力及び第2の位相差画素PBの出力に基づいて位相ずれ量を検出する。位相ずれ量は、第1の位相差画素PAの各出力データと第2の位相差画素PBの各出力データの相関が最大になるとき(第1の位相差画素PAと第2の位相差画素PBの各出力データの差分絶対値の積算値が最小になるとき)の各出力データ間のシフト量から算出することができる。
デフォーカス量算出部230Bは、位相ずれ量検出部230Aにより検出された位相ずれ量と、交換レンズ100の現在のF値(光線角度)に対応する係数とを乗算することによりデフォーカス量を算出する。
本例のように互換性のない交換レンズ100の場合、カメラ本体200により交換レンズ100を制御することができないが、焦点調節部209によりイメージセンサ201を光軸方向に移動させることにより自動的に焦点調節を行うことができる。
即ち、AF制御部230は、AF制御を行う場合にデフォーカス量算出部230Bにより算出されたデフォーカス量に基づいて焦点調節部209を駆動制御し、イメージセンサ201を算出されたデフォーカス量だけ移動させる。これにより、デフォーカス量がゼロとなる位置(位相差が最小となる位置)にイメージセンサ201を移動させることができ、イメージセンサ201の結像面に被写体像を合焦させる位相差AFを行うことができる。
尚、AFは、位相差AFに限定されず、例えば、コントラストAFでもよい。コントラストAFの場合、AF制御部230は、AF領域内におけるG画素(Gのカラーフィルタを有する画素)のG信号から高周波成分を抽出し、抽出した高周波成分の絶対値の積分値(焦点評価値)を算出し、算出した焦点評価値が最大となる位置(即ち、コントラストが最大になる位置)に焦点調節部209を介してイメージセンサ201を移動させる。
明るさ検出部232(測光部)は、被写体の明るさ(被写体輝度)を検出する部分であり、被写体輝度に対応するAE制御及びAWB(Auto White Balance)制御に必要な数値(露出値(EV値(exposure value)))を算出する。明るさ検出部232は、イメージセンサ201を介して取得した画像の輝度、画像の輝度の取得時のシャッタースピード及びF値によりEV値を算出する。
本体側CPU220は、互換性のある交換レンズ300の場合、明るさ検出部232から得たEV値に基づいて所定のプログラム線図からF値、シャッタースピード及びISO感度を決定し、AE制御を行うことができる。
また、本体側CPU220は、互換性のない交換レンズ100の場合、イメージセンサ201を介して取得した画像の輝度が、適正な輝度になるようにシャッタースピード及びISO感度を決定し、AE制御を行うことができる。
ホワイトバランス補正部234は、RGBデータ(Rデータ、Gデータ及びBデータ)の色データ毎のホワイトバランスゲイン(WB(White Balance)ゲイン)Gr,Gg,Gbを算出し、Rデータ、Gデータ及びBデータに、それぞれ算出したWBゲインGr,Gg,Gbを乗算することによりホワイトバランス補正を行う。ここで、WBゲインGr,Gg,Gbの算出方法としては、被写体の明るさ(EV値)によるシーン認識(屋外、屋内の判定等)及び周囲光の色温度等に基づいて被写体を照明している光源種を特定し、予め光源種毎に適切なWBゲインが記憶されている記憶部から特定した光源種に対応するWBゲインを読み出す方法が考えられるが、少なくともEV値を使用してWBゲインGr,Gg,Gbを求める他の公知の方法が考えられる。
無線通信部236は、Wi-Fi(Wireless Fidelity)(登録商標)、Bluetooth(登録商標)等の規格の近距離無線通信を行う部分であり、周辺のデジタル機器(スマートフォン、等の携帯端末)との間で必要な情報の送受信を行う。
GPS受信部238は、本体側CPU220の指示に従って、複数のGPS衛星から送信されるGPS信号を受信し、受信した複数のGPS信号に基づく測位演算処理を実行し、カメラ本体200の緯度、経度、及び高度からなるGPS情報を取得する。取得されたGPS情報は、撮像された画像の撮像位置を示す付属情報として画像ファイルのヘッダに記録することができる。
電源制御部240は、本体側CPU220の指令に従って、バッテリ242から供給される電源電圧をカメラ本体200の各部に与える。また、電源制御部240は、本体側CPU220の指令に従って、本体マウント260及びレンズマウント160を介して、バッテリ242から供給される電源電圧を、互換性のある交換レンズ300の各部に与える。
レンズ電源スイッチ244は、本体側CPU220の指令に従って、本体マウント260及びレンズマウント360を介して交換レンズ300に与える電源電圧のオン及びオフの切り替えとレベルの切り替えを行う。
本体側通信部250は、本体側CPU220の指令に従って、本体マウント260及びレンズマウント360を介して接続された交換レンズ300のレンズ側通信部350との間で、リクエスト信号、回答信号の送受信(双方向通信)を行う。尚、本体マウント260には、図1に示すように複数の端子260Aが設けられており、交換レンズ300がカメラ本体200に装着(レンズマウント360と本体マウント260とが接続)されると、本体マウント260に設けられた複数の端子260A(図1)と、レンズマウント360に設けられた複数の端子(図示せず)とが電気的に接続され、本体側通信部250とレンズ側通信部350との間で双方向通信が可能になる。
内蔵フラッシュ30(図1)は、例えば、TTL(Through The Lens)自動調光方式のフラッシュであり、フラッシュ発光部270と、フラッシュ制御部272とから構成されている。
フラッシュ制御部272は、フラッシュ発光部270から発光するフラッシュ光の発光量(ガイドナンバー)を調整する機能を有する。即ち、フラッシュ制御部272は、本体側CPU220からのフラッシュ撮像指示に同期してフラッシュ発光部270を発光させ、交換レンズ100又は300の撮像光学系102又は302を介して入射する反射光(周囲光を含む)の測光を開始し、測光値が標準露出値に達すると、フラッシュ発光部270からのフラッシュ光の発光を停止させる。
フォーカルプレーンシャッタ(FPS:focal-plane shutter)280は、撮像装置10のメカシャッタを構成し、イメージセンサ201の直前に配置される。FPS制御部296は、本体側CPU220からの入力情報(S2オン信号、シャッタスピード等)に基づいてFPS280の先幕、後幕の開閉を制御し、イメージセンサ201における露光時間(シャッタスピード)を制御する。
[情報取得方法の原理]
次に、互換性のない交換レンズ100がカメラ本体200に装着された場合に、交換レンズ100を通じて被写体光がイメージセンサ201に入射する際の、イメージセンサ201に対する光線角度に関連する情報を取得する方法を、原理的に説明する。以下、イメージセンサ201に対する光線角度に関連する情報として、交換レンズ100の「F値」を例に説明する。
図12は、イメージセンサ201の通常画素(G画素)、第1の位相差画素PA及び第2の位相差画素PBの入射角特性を示すグラフであり、イメージセンサ201のx方向(水平方向)の角度に対する通常画素(G画素)の感度Gc,第1の位相差画素PAの感度PAc,及び第2の位相差画素PBの感度PBcを示している。
図12に示すようにG画素の感度Gcが一番高く、第1の位相差画素PA及び第2の位相差画素PBの感度PAc,PBcは、G画素よりも低い。また、第1の位相差画素PAと第2の位相差画素PBとは、開口の左半分及び右半分が遮光膜MA,MBで遮光されていることから、第1の位相差画素PAの感度PAcと第2の位相差画素PBの感度PBcとは、入射角ゼロを中心にして対称性を有するとともに、感度のピーク位置がずれる。
図13は、撮像光学系102の光軸Lと平行な主光線を有する光束が、イメージセンサ201に入射する場合であって、F値が小さい場合と大きい場合とに関して示している。
図13において、θ1は、F値が小さい場合の主光線(この場合、光軸L)と、上線(射出瞳又は入射瞳の上の縁を通る光線)とのなす角度(光線角度)を示し、θ2は、F値が大きい場合の主光線と、上線とのなす光線角度を示している。
図14は、イメージセンサ201のG画素、第1の位相差画素PA及び第2の位相差画素PBの入射角特性を示すグラフ(図12に示したグラフ)と、F値がF2、F4の場合における、イメージセンサ201の中心部の画素(G画素、第1の位相差画素PA及び第2の位相差画素PB)に入射する光束の角度範囲とを示す図である。
図14に示すように、F値が小さい場合(F2)には、入射する光束の角度範囲は大きくなり(図13の光線角度θ1は大きくなり)、F値が大きい場合(F4)には、入射する光束の角度範囲は小さくなる(図13の光線角度θ2は小さくなる)。
いま、イメージセンサ201の中心部のG画素の出力と、中心部の第1の位相差画素PA(又は第2の位相差画素PB)の出力との比を算出すると、F値に応じて異なる比が得られる。例えば、イメージセンサ201の中心部のG画素の出力に対する、中心部の第1の位相差画素PAの出力の比を算出すると、F値が小さい程、算出される比が小さくなる。これは、第1の位相差画素PAの感度PAcのピーク位置が入射角ゼロからずれ、かつピーク位置がずれた方向と逆方向の感度が、G画素の感度に比べて急峻に低下する特性を有するからである。
したがって、G画素の出力と第1の位相差画素PA(又は第2の位相差画素PB)の出力との比を、F値毎に記憶したフラッシュROM226又はROM228等の記憶部を予め準備しておき、交換レンズ100の現在のF値を取得する際にF値取得用の撮像を行う。そして、F値取得用の撮像によって取得したG画素の出力と第1の位相差画素PA(又は第2の位相差画素PB)の出力との比を算出し、算出した比に基づいて記憶部から対応するF値を読み出すことで、F値を取得することができる。
図15は、交換レンズ100の現在のF値を取得(推定)するカメラ本体200の本体側CPU220の機能を示すブロック図である。
図15に示すように本体側CPU220(撮像装置)は、フラッシュROM226又はROM228に格納されたF値推定用のプログラム(情報取得プログラム)を実行することより各種の処理部として機能し、この実施形態では、画素情報取得部220A、演算部220B、及び情報取得部220Cとしての機能を有する。上記情報取得プログラムが格納される媒体は、ハードディスク、CD(Compact Disk)、DVD(Digital Versatile Disk)、各種半導体メモリ等の、非一時的かつコンピュータ読取可能な記録媒体であってもよい。
撮像装置10の操作部222には、情報取得モード(F値取得モード)を設定するモード設定部が設けられている。ユーザが交換レンズ100の絞りリングを操作し、絞り108のF値を切り換える場合、ユーザは、モード設定部を操作してF値取得モードの設定を行い、F値取得用の撮像を行う。尚、F値取得用の撮像は、コントラストの低い被写体を撮像し、又はボケた状態で撮像することが好ましい。F値取得に使用するG画素、第1の位相差画素PA(又は第2の位相差画素PB)の各画素に入射する光量が均一であることが好ましいからである。
モード設定部によりF値取得モードが設定された状態で、撮像指示部として機能するシャッタレリーズスイッチ22から撮像の指示が入力されると、本体側CPU220の画素情報取得部220A、演算部220B及び情報取得部220Cは、それぞれ以下に示すF値取得用の動作を行う。
画素情報取得部220Aは、F値取得用の撮像により交換レンズ100及びイメージセンサ201等を介して得られた画像データのうちの、F値取得に使用する第1の位相差画素PA(又は第2の位相差画素PB)及びG画素の各出力データ(画素情報)を取得する。
本例では、イメージセンサ201の中心部の第1の位相差画素PA(第1の画素)及びG画素(第2の画素)の各出力データを取得する。
演算部220Bは、画素情報取得部220Aにより取得した第1の位相差画素PAの出力データ(第1の画素の出力)とG画素の出力データ(第2の画素の出力)の比を算出する。
演算部220Bによる第1の位相差画素PAの出力データとG画素の出力データとの比を算出する場合、比の算出に使用する第1の位相差画素PA及びG画素の数を多くすることが好ましい。被写体のコントラストが高い場合、第1の位相差画素PAの出力データとG画素の出力データとの比が、被写体のコントラストの影響を受けて変動するからである。
また、F値取得用の撮像を行う場合の被写体のコントラストに応じて、第1の位相差画素PAの出力データとG画素の出力データとの比の算出に使用する画素数(画素情報を取得する領域の大きさ)を変化させるようにしてもよい。
具体的には、撮像装置10に被写体のコントラストを検出するコントラスト検出部を設ける。コントラスト検出部は、AF制御部230がコントラスト検出部を含む場合には、AF制御部230に含まれる既存のコントラスト検出部を使用することができ、AF制御部230がコントラスト検出部を含まない場合には、本体側CPU220にコントラスト検出機能を追加することが考えられる。
そして、F値取得用の撮像を行う場合の被写体のコントラストを、コントラスト検出部により検出する。即ち、F値取得用の撮像により取得したイメージセンサ201の全撮像領域、又は全撮像領域よりも狭いイメージセンサ201の中心部を含む領域(コントラスト検出領域)のG画素の出力データから高周波成分を抽出し、抽出した高周波成分の絶対値の積分値を、コントラスト評価値として算出する。コントラスト検出領域における被写体のコントラストが高い程、コントラスト検出部により算出されるコントラスト評価値が大きくなる。
演算部220Bは、コントラスト検出部により検出された被写体のコントラストに応じて、被写体のコントラストが高い程、比の算出に使用する第1の位相差画素PAとG画素の数を多くする。
また、AF制御部230の位相ずれ量検出部230Aにより検出される位相ずれ量からコントラスト(ボケ具合)が分かるため、位相ずれ量に応じて使用する第1の位相差画素PAとG画素の数を変更してもよい。
更に、演算部220Bは、複数の第1の位相差画素PAの各出力データ及び複数のG画素の各出力データを使用し、両者の比を算出する場合、飽和している画素(出力データが8ビットのデータの場合、255又はそれに近い値)を除いて比を算出することが好ましい。
情報取得部220Cは、演算部220Bにより算出された比に基づいて交換レンズ100を通じて被写体光がイメージセンサ201に入射する際の、イメージセンサ201に対する光線角度に関連する情報(本例では、F値)を取得する。
具体的には、撮像装置10は、第1の位相差画素PAの出力データとG画素の出力データとの比を、交換レンズ100のF値毎に記憶するフラッシュROM226又はROM228等の記憶部を備える。製品出荷前に、上記の比とF値との関係を示すテーブルをROM228に記憶させてもよいし、ネットワーク上のサーバから上記の比とF値との関係を示すテーブルをダウンロードし、フラッシュROM226に記憶させてもよい。
情報取得部220Cは、演算部220Bにより算出された比に基づいてフラッシュROM226又はROM228からその比に対応するF値を読み出し、読み出したF値を、交換レンズ100の現在のF値として取得する。尚、フラッシュROM226又はROM228に、算出された比及びそれに対応するF値が記憶されていない場合には、算出された比と、その比の前後の2つの記憶された比とに基づいて、記憶された2つの比に対応する2つのF値のうちの、算出された比に近い方の比を採用してF値を読み出してもよいし、算出された比と、算出された比を挟んで記憶された2つの比とに基づいて、記憶された2つの比に対応する2つのF値を補間してF値を算出するようにしてもよい。
本実施形態によれば、互換性のない交換レンズ100がカメラ本体200に装着された場合でも、交換レンズ100の現在のF値を簡単かつ精度よく取得することができ、また、位相差画素を有するイメージセンサ201を備えた撮像装置10の場合、特別なハードウェアを追加することなく、交換レンズ100の現在のF値を取得することができ、安価な装置とすることができる。尚、互換性のある交換レンズ300がカメラ本体200に装着された場合、交換レンズ300とカメラ本体200との間で通信することができ、カメラ本体200は、交換レンズ300から通信によりF値を含むレンズ情報を取得することができるため、本実施形態によりF値を推定する必要はない。
また、交換レンズ100の「F値」を取得することにより、「シャッタースピード」、及び「画像の輝度(明るさ)」の情報を元に、被写体の明るさ(画像の輝度ではなく真の被写体の明るさ)を算出することができる。また、真の被写体の明るさは、シーン認識(屋外、屋内の判定等)に利用され、オートホワイトバランス調整等に利用することができる。
上記の実施形態では、第1の位相差画素PAの出力データと通常画素(G画素)の出力データとの比を算出するようにしたが、これに限らず、第2の位相差画素PBの出力データと通常画素(G画素)の出力データとの比を算出し、算出した比に基づいてF値を取得するようにしてもよい。
一方、イメージセンサ201の中心部の第1の位相差画素PAの出力データと第2の位相差画素PBの出力データとの比を算出する場合、図14に示すように第1の位相差画素PAの感度PAcと第2の位相差画素PBの感度PBcとは、入射角ゼロを中心にして対称性を有するため、両者の比は、F値によって変化しない。
そこで、第1の位相差画素PA及び第2の位相差画素PBを、F値取得に使用する第1の画素及び第2の画素とする場合には、図16に示すように、イメージセンサ201の像高の高い位置における、第1の位相差画素PAと第2の位相差画素PBを使用する。
図17は、イメージセンサ201のG画素、第1の位相差画素PA及び第2の位相差画素PBの入射角特性を示すグラフ(図12に示したグラフ)と、F値がF2、F4の場合における、イメージセンサ201の像高の高い或る画素(G画素、第1の位相差画素PA及び第2の位相差画素PB)に入射する光束の角度範囲とを示す図である。
図17に示すように、イメージセンサ201の像高の高い位置における第1の位相差画素PA及び第2の位相差画素PBでは、第1の位相差画素PAの感度PAcと第2の位相差画素PBの感度PBcとは、それぞれ主光線に対して対称にならない。
したがって、イメージセンサ201の像高の高い位置における第1の位相差画素PAと第2の位相差画素PBの出力との比を算出すると、F値(例えば、F2,F4)に応じて異なる比が得られる。
イメージセンサ201の像高の高い位置における第1の位相差画素PA(又は第2の位相差画素PB)の出力とG画素の出力との比を算出してもよいことは言うまでもない。
また、本例のイメージセンサ201には、入射角特性が異なる3種類の画素(第1の位相差画素、第2の位相差画素及び通常画素)が存在するため、これらの3種類の画素の2つの画素の組合せは3通りあり、最大3つの比を求めることができる。
このように入射角特性が異なる3種類以上の画素が存在する場合には、複数の比を求めることができる。複数の比を使用して交換レンズ100のF値を推定すると、より精度の高いF値の推定が可能になる。
図13及び図16に示した例では、イメージセンサ201の中央部及び像高の高い位置での入射角特性が異なる2つの画素の出力の比を算出するようにしたが、図18に示すようにイメージセンサ201の像高の異なるセンサ位置毎に入射角特性が異なる2つの画素の出力の比を算出し、算出した比の変化から交換レンズ100の現在のF値を推定するようにしてもよい。
ここで、イメージセンサ201の像高の異なるセンサ位置とは、図18に示すように光軸Lに対応するイメージセンサ201のセンサ中心(x=0)から、第1の位相差画素PAと第2の位相差画素PBの瞳分割方向であるイメージセンサ201のx方向の異なる位置である。
図19及び図20は、それぞれ交換レンズ100の絞り108が、開放側及び小絞り側にある場合のセンサ位置毎の比の変化を示すグラフである。
図19及び図20において、PArは、G画素の出力に対する第1の位相差画素PAの出力の比であり、PBrは、G画素の出力に対する第2の位相差画素PBの出力の比である。
図19及び図20に示すように、センサ位置毎の絞り108が開放側の比PAr、又は比PBrの変化は小さく(傾きは小さく)、センサ位置毎の絞り108が小絞り側の比PAr、又はPBrの変化は大きい(傾きは大きい)。
このように、交換レンズ100の絞り108が開放側か小絞り側かに応じて(即ち、F値に応じて)、比PAr又は比PBrの変化が異なるため、センサ位置に応じて比PAr又は比PBrがどのように変化するかに応じてF値を推定することができる。
具体的には、撮像装置10は、第1の位相差画素PAの出力データとG画素の出力データとの比PArであって、像高(センサ位置)毎の比PArを示す第1のテーブルを、交換レンズ100のF値毎に記憶するフラッシュROM226又はROM228等の記憶部を備える。製品出荷前に、交換レンズ100のF値毎に上記の第1のテーブルをROM228に記憶させてもよいし、ネットワーク上のサーバから交換レンズ100のF値毎に上記の第1のテーブルをダウンロードし、フラッシュROM226に記憶させてもよい。
画素情報取得部220Aは、イメージセンサ201の複数の像高における第1の位相差画素PAの出力データとG画素の出力データとを取得し、演算部220Bは、取得した複数の像高毎の第1の位相差画素PAの出力データとG画素の出力データと比を算出し、像高毎の比を示す第2のテーブルを取得する。
情報取得部220Cは、演算部220Bにより算出された第2のテーブルに基づいて、フラッシュROM226又はROM228から第2のテーブルと一致し又は最も近似する第1のテーブルに対応するF値を読み出し、読み出したF値を交換レンズ100の現在のF値として取得する。
尚、第1、第2のテーブルは、第1の位相差画素PAの出力とG画素の出力と比(センサ位置毎の比)に基づいて作成されるものに限らず、第2の位相差画素PBの出力とG画素の出力との比、第1の位相差画素PAの出力と第2の位相差画素PBの出力との比に基づいて作成されるものでもよい。また、図19及び図20に示したセンサ位置毎の比PAr又は比PBrは、リニアに変化しているが、これに限らない。
本実施形態では、交換レンズ100を通じて被写体光がイメージセンサ201に入射する際の、イメージセンサ201に対する光線角度に関連する情報として、交換レンズ100のF値を取得しているが、これに限らず、交換レンズ100の開口数、又はセンサ中心の光線角度を取得するようにしてもよい。更に、イメージセンサ201に対する光線角度に関連する情報は、センサ中心の光線角度だけでなく、例えば、イメージセンサ201の異なる位置の画素に対する光線角度も含む。
図21は、撮像光学系102の開口径D,開口径Dの半径r,焦点距離f及び光線角度θの関係を示す図である。
F値は、F値の定義により次式で表すことができる。
[数1]
F=f/D
また、図21に示した撮像光学系102の開口径D,開口径Dの半径r,焦点距離f及び光線角度θにおいて正弦条件を満たす場合、sinθは、次式で表すことができる。
[数2]
sinθ=r/f=D/(2f)
[数1]式及び[数2]から、F値は、次式で表すことができる。
[数3]
F=1/(2sinθ)
また、空気中の開口数NAは、次式で表すことができる。
[数4]
NA=sinθ
また、F値と開口数とは、次式で関係付けられている。
[数5]
F=1/(2NA)
上記のようにF値、開口数、及び光線角度は、相互に関係しており、これらのいずれか1つが分かると、他の2つを換算することができる。
本例は、交換レンズ100のF値を推定しているが、推定したF値から開口数又は光線角度を換算により取得することができる。
また、入射角特性が異なる第1の画素と第2の画素の出力の比を、互換性のない交換レンズの開口数毎に記憶部に記憶させることにより、第1の画素と第2の画素の出力の比から記憶部から対応する開口数を読み出す(取得する)ことができる。更に、取得した開口数からF値又は光線角度を換算することもできる。
上記のように互換性のない交換レンズ100がカメラ本体200に装着された場合でも、交換レンズ100の現在のF値等を推定することでき、これにより被写体の明るさの算出や、被写体の明るさによるシーン認識が可能になる。また、互換性のない交換レンズ100がカメラ本体200に装着された場合でも、撮像された画像の付属情報として画像ファイルのヘッダにF値又は開口数を記録することができる。
[情報取得方法]
図22は、本発明に係る情報取得方法の第1の実施形態を示すフローチャートである。
図22において、本体側CPU220は、操作部222によりF値取得モード(情報取得モード)が設定されているか否かを判別する(ステップS10)。F値取得モードが設定されている場合には、更にシャッタレリーズスイッチ22から撮像の指示(S2オンの信号)が出力されたか否かを判別する(ステップS12)。
F値取得モードが設定され、かつS2オンの信号が出力されると、本体側CPU220は、F値取得用の撮像を行い、本体側CPU220の画素情報取得部220Aは、F値取得用の撮像により取得した画像データのうち、イメージセンサ201の中心部の入射角特性が異なる第1の画素(G画素)及び第2の画素(第1の位相差画素PA)の各出力データを取得する(ステップS14、画素情報取得ステップ)。
本体側CPU220の演算部220Bは、ステップS14で取得した第1、第2の画素(第1の位相差画素PA、G画素)の出力データの比を算出する(ステップS16、演算ステップ)。
本体側CPU220の情報取得部220Cは、ステップS16で算出された比に基づいてF値を取得する(ステップS18、情報取得ステップ)。このステップS18によるF値の取得は、入射角特性が異なる第1、第2の画素の比とF値との関係を示すテーブルを記憶するフラッシュROM226又はROM228から、算出された比に対応するF値を読み出すことにより行われる。
図23は、本発明に係る情報取得方法の第2の実施形態を示すフローチャートである。尚、図22に示した第1の実施形態と共通する部分には同一のステップ番号を付し、その詳細な説明は省略する。
図23において、F値取得モードが設定され、かつS2オンの信号が出力されると、本体側CPU220は、F値取得用の撮像を行い、本体側CPU220の画素情報取得部220Aは、F値取得用の撮像により取得した画像データのうち、像高の異なる複数のセンサ位置における複数組の第1、第2の画素(第1の位相差画素PA、G画素)の各出力データを取得する(ステップS20、画素情報取得ステップ)。
本体側CPU220の演算部220Bは、ステップS20で取得した複数組(像高毎)の第1、第2の画素(第1の位相差画素PA、G画素)の出力データの比を算出し(ステップS22)、像高毎の比を示す第2のテーブルを生成する(ステップS24)。
本体側CPU220の情報取得部220Cは、ステップS24により生成された第2のテーブルに基づいて交換レンズ100の現在のF値を取得する(ステップS26)。フラッシュROM226又はROM228には、予め第1、第2の画素の出力データの比であって、像高(センサ位置)毎の比を示す第1のテーブルが、交換レンズ100のF値毎に記憶されている。ステップS26によるF値の取得は、フラッシュROM226又はROM228から、ステップS24で生成された第2のテーブルと一致し又は最も近似する第1のテーブルに対応するF値を読み出し、読み出したF値を交換レンズ100の現在のF値として取得する。
[その他]
本発明に適用されるイメージセンサは、通常画素と位相差画素(第1、第2の位相差画素)とが混在しているが、通常画素を有さない位相差画素のみで構成されたイメージセンサでもよい。位相差画素のみで構成されたイメージセンサの場合、隣接する一対の第1、第2の位相差画素の出力を加算することで、通常画素と同等の出力を得ることができる。
また、本実施形態において、例えば、画素情報取得部220A、演算部220B、及び情報取得部220C等の各種の処理を実行する処理部(processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ(processor)である。各種のプロセッサには、ソフトウェア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPU(Central Processing Unit)、FPGA(Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、ASIC(Application Specific Integrated Circuit)などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
1つの処理部は、これら各種のプロセッサのうちの1つで構成されていてもよいし、同種または異種の2つ以上のプロセッサ(例えば、複数のFPGA、あるいはCPUとFPGAの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントやサーバなどのコンピュータに代表されるように、1つ以上のCPUとソフトウェアの組合せで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)などに代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを1つ以上用いて構成される。
更に、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路(circuitry)である。
また、本発明は上述した実施形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。
10 撮像装置
20 ファインダ窓
22 シャッタレリーズスイッチ
23 シャッタースピードダイヤル
24 露出補正ダイヤル
25 電源レバー
26 接眼部
27 MENU/OKキー
28 十字キー
29 再生ボタン
30 内蔵フラッシュ
100、300 交換レンズ
102、302 撮像光学系
104、304 レンズ群
108、308 絞り
160、360 レンズマウント
200 カメラ本体
201 イメージセンサ
202 イメージセンサ制御部
203 アナログ信号処理部
204 A/D変換器
205 画像入力コントローラ
206 デジタル信号処理部
207 RAM
208 圧縮伸張処理部
209 焦点調節部
210 メディア制御部
212 メモリカード
214 表示制御部
216 モニタ
220 本体側CPU
220A 画素情報取得部
220B 演算部
220C 情報取得部
222 操作部
224 時計部
226 フラッシュROM
228 ROM
230 AF制御部
230A 位相ずれ量検出部
230B デフォーカス量算出部
232 明るさ検出部
234 ホワイトバランス補正部
236 無線通信部
238 GPS受信部
240 電源制御部
242 バッテリ
244 レンズ電源スイッチ
250 本体側通信部
260 本体マウント
270 フラッシュ発光部
272 フラッシュ制御部
296 FPS制御部
316 フォーカスレンズ制御部
318 絞り制御部
320 レンズ側CPU
322 RAM
324 ROM
326 フラッシュROM
350 レンズ側通信部
D 開口径
Gc、PAc、PBc 感度
L 光軸
MA、MB 遮光膜
ML マイクロレンズ
NA 開口数
PA 第1の位相差画素
PAr、PBr 比
PB 第2の位相差画素
PD フォトダイオード
S10〜S26 ステップ
f 焦点距離
r 半径
θ、θ1、θ2 光線角度

Claims (19)

  1. 第1の画素と、前記第1の画素とは入射角特性が異なる第2の画素とを有するイメージセンサと、
    交換レンズが脱着可能な装着部と、
    前記装着部に装着された前記交換レンズを通じて被写体光が入射する前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力をそれぞれ取得する画素情報取得部と、
    前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を、前記交換レンズを通じて被写体光が前記イメージセンサに入射する際の前記イメージセンサに対する光線角度に関連する情報毎に記憶する記憶部と、
    前記画素情報取得部により取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高ごとの比を取得する演算部と、
    前記演算部により算出された像高ごとの比に基づいて、前記記憶部から前記イメージセンサに対する光線角度に関連する情報を取得する情報取得部と、
    を備えた撮像装置。
  2. 前記イメージセンサは、前記交換レンズのそれぞれ異なる領域を通過した各被写体光を瞳分割により選択的に受光する第1の位相差画素及び第2の位相差画素を有し、
    前記第1の画素は、前記第1の位相差画素であり、前記第2の画素は、前記第2の位相差画素である請求項1に記載の撮像装置。
  3. 前記イメージセンサは、前記交換レンズのそれぞれ異なる領域を通過した各被写体光を瞳分割により選択的に受光する第1の位相差画素及び第2の位相差画素と、前記各被写体光をそれぞれ受光する通常画素とを有し、
    前記第1の画素は、前記第1の位相差画素又は前記第2の位相差画素であり、前記第2の画素は、前記通常画素である請求項1に記載の撮像装置。
  4. 前記イメージセンサに対する光線角度に関連する情報は、前記交換レンズの絞り値、前記交換レンズの開口数、又は前記イメージセンサに対する光線角度である請求項1から3のいずれか1項に記載の撮像装置。
  5. 前記イメージセンサに対する光線角度に関連する情報は、前記交換レンズの絞り値又は前記交換レンズの開口数であり、
    前記記憶部は、前記第1の画素の出力と前記第2の画素の出力との比を、前記交換レンズの絞り値毎又は前記交換レンズの開口数毎に記憶し、
    前記情報取得部は、前記演算部により算出された比に基づいて前記記憶部から前記比に対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を前記交換レンズの現在の絞り値又は開口数として取得する請求項1から3のいずれか1項に記載の撮像装置。
  6. 前記イメージセンサに対する光線角度に関連する情報は、前記交換レンズの絞り値又は前記交換レンズの開口数であり、
    前記記憶部は、前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を示す第1のテーブルを、前記交換レンズの絞り値又は前記交換レンズの開口数毎に記憶し、
    前記画素情報取得部は、前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力を取得し、
    前記演算部は、前記取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高毎の比を示す第2のテーブルを取得し、
    前記情報取得部は、前記取得した第2のテーブルに基づいて前記記憶部から前記第2のテーブルと一致し又は最も近似する第1のテーブルに対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を前記交換レンズの現在の絞り値又は開口数として取得する請求項1から3のいずれか1項に記載の撮像装置。
  7. 前記演算部は、前記取得した複数の像高毎の前記第1の画素及び前記第2の画素のうちの飽和していない前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高毎の比を示す前記第2のテーブルを取得する請求項6に記載の撮像装置。
  8. 被写体のコントラストを検出するコントラスト検出部を備え、
    前記演算部は、前記コントラスト検出部により検出された被写体のコントラストに応じて、被写体のコントラストが高い程、前記比の算出に使用する前記第1の画素及び前記第2の画素の数を多くする請求項1から7のいずれか1項に記載の撮像装置。
  9. 交換レンズとの間で通信を行う通信部と、
    装着された交換レンズから前記通信部を介して前記交換レンズの絞り値又は開口数を取得できない場合に前記画素情報取得部、前記演算部及び前記情報取得部をそれぞれ動作させる制御部と、
    を備えた請求項1から6のいずれか1項に記載の撮像装置。
  10. 前記通信部を介して取得した交換レンズの絞り値又は開口数若しくは前記情報取得部により取得した交換レンズの絞り値又は開口数を使用して被写体の明るさを算出する測光部を備えた請求項9に記載の撮像装置。
  11. 前記イメージセンサの前記第1の位相差画素及び前記第2の位相差画素の出力に基づいて位相ずれ量を検出する位相ずれ量検出部と、
    前記イメージセンサに対する光線角度に関連する情報と前記位相ずれ量とに基づいてデフォーカス量を算出するデフォーカス量算出部と、
    前記算出された前記デフォーカス量に基づいて前記イメージセンサを移動させる焦点調節部と、
    を備えた請求項2又は3に記載の撮像装置。
  12. 情報取得モードを設定するモード設定部を備え、
    前記画素情報取得部、前記演算部、及び前記情報取得部は、それぞれ前記モード設定部により前記情報取得モードが設定された状態で撮像指示部から撮像の指示が入力された場合に動作する請求項1から11のいずれか1項に記載の撮像装置。
  13. 撮像指示部から撮像の指示が入力されると、前記イメージセンサを介して画像データを取得する画像取得部と、
    前記取得した画像データを格納する画像ファイルを作成し、前記画像ファイルを記録媒体に記録する記録部と、を備え、
    前記記録部は、前記画像ファイルのヘッダに、前記情報取得部が取得した前記イメージセンサに対する光線角度に関連する情報を記録する請求項1から12のいずれか1項に記載の撮像装置。
  14. 装着された交換レンズを通じて被写体光が入射するイメージセンサ上の第1の画素と前記イメージセンサ上の第2の画素であって、前記第1の画素とは入射角特性が異なる第2の画素とを有する前記イメージセンサを備える撮像装置における情報取得方法であって、
    前記撮像装置は、前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を、前記交換レンズを通じて被写体光が前記イメージセンサに入射する際の前記イメージセンサに対する光線角度に関連する情報毎に記憶する記憶部を備え、
    前記撮像装置に装着された交換レンズを通じて被写体光が入射する前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力をそれぞれ取得する画素情報取得ステップと、
    前記取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高ごとの比を取得する演算ステップと、
    前記算出された像高ごとの比に基づいて、前記記憶部から前記イメージセンサに対する光線角度に関連する情報を取得する情報取得ステップと、
    を含む情報取得方法。
  15. 前記イメージセンサに対する光線角度に関連する情報は、前記交換レンズの絞り値又は前記交換レンズの開口数であり、
    前記記憶部は、前記第1の画素の出力と前記第2の画素の出力との比を、前記交換レンズの絞り値毎又は前記交換レンズの開口数毎に記憶し、
    前記情報取得ステップは、前記算出された比に基づいて前記記憶部から前記比に対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を前記交換レンズの現在の絞り値又は開口数として取得する請求項14に記載の情報取得方法。
  16. 前記イメージセンサに対する光線角度に関連する情報は、前記交換レンズの絞り値又は前記交換レンズの開口数であり、
    前記記憶部は、前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を示す第1のテーブルを、前記交換レンズの絞り値毎又は前記交換レンズの開口数毎に記憶し、
    前記画素情報取得ステップは、前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力を取得し、
    前記演算ステップは、前記取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高毎の比を示す第2のテーブルを取得し、
    前記情報取得ステップは、前記取得した第2のテーブルに基づいて前記記憶部から前記第2のテーブルと一致し又は最も近似する第1のテーブルに対応する絞り値又は開口数を読み出し、読み出した絞り値又は開口数を前記交換レンズの現在の絞り値又は開口数として取得する請求項14に記載の情報取得方法。
  17. 前記撮像装置は、交換レンズとの間で通信を行う通信部を備え、
    装着された交換レンズから前記通信部を介して前記交換レンズの絞り値又は開口数を取得するステップと、
    前記通信部を介して交換レンズの絞り値又は開口数を取得できない場合に前記画素情報取得ステップ、前記演算ステップ及び前記情報取得ステップの処理を実行して前記交換レンズの現在の絞り値又は開口数を取得する請求項14から16のいずれか1項に記載の情報取得方法。
  18. 装着された交換レンズを通じて被写体光が入射するイメージセンサ上の第1の画素と前記イメージセンサ上の第2の画素であって、前記第1の画素とは入射角特性が異なる第2の画素とを有する前記イメージセンサを備え、かつ、前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を、前記交換レンズを通じて被写体光が前記イメージセンサに入射する際の前記イメージセンサに対する光線角度に関連する情報毎に記憶する記憶部を備える撮像装置に適用される情報取得プログラムであって、
    前記撮像装置に装着された交換レンズを通じて被写体光が入射する前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力をそれぞれ取得する機能と、
    前記取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高ごとの比を取得する機能と、
    前記算出された像高ごとの比に基づいて、前記記憶部から前記イメージセンサに対する光線角度に関連する情報を取得する機能と、
    を前記撮像装置に実現させる情報取得プログラム。
  19. 非一時的かつコンピュータ読取可能な記録媒体であって、前記記録媒体に格納された指令がコンピュータによって読み取られた場合に、
    装着された交換レンズを通じて被写体光が入射するイメージセンサ上の第1の画素と前記イメージセンサ上の第2の画素であって、前記第1の画素とは入射角特性が異なる第2の画素とを有する前記イメージセンサを備え、かつ、前記第1の画素の出力と前記第2の画素の出力との比であって、像高毎の比を、前記交換レンズを通じて被写体光が前記イメージセンサに入射する際の前記イメージセンサに対する光線角度に関連する情報毎に記憶する記憶部を備える撮像装置における情報取得機能であって、
    前記撮像装置に装着された交換レンズを通じて被写体光が入射する前記イメージセンサの複数の像高における前記第1の画素の出力及び前記第2の画素の出力をそれぞれ取得する機能と、
    前記取得した複数の像高毎の前記第1の画素の出力と前記第2の画素の出力との比を算出し、像高ごとの比を取得する機能と、
    前記算出された像高ごとの比に基づいて、前記記憶部から前記イメージセンサに対する光線角度に関連する情報を取得する機能と、
    を含む情報取得機能をコンピュータに実現させる記録媒体。
JP2019545091A 2017-09-28 2018-09-25 撮像装置、情報取得方法及び情報取得プログラム Active JP6911136B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017188868 2017-09-28
JP2017188868 2017-09-28
PCT/JP2018/035259 WO2019065555A1 (ja) 2017-09-28 2018-09-25 撮像装置、情報取得方法及び情報取得プログラム

Publications (2)

Publication Number Publication Date
JPWO2019065555A1 JPWO2019065555A1 (ja) 2020-11-05
JP6911136B2 true JP6911136B2 (ja) 2021-07-28

Family

ID=65901826

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019545091A Active JP6911136B2 (ja) 2017-09-28 2018-09-25 撮像装置、情報取得方法及び情報取得プログラム

Country Status (4)

Country Link
US (1) US11201999B2 (ja)
JP (1) JP6911136B2 (ja)
CN (1) CN111133378B (ja)
WO (1) WO2019065555A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6997295B2 (ja) * 2018-03-30 2022-01-17 富士フイルム株式会社 撮像装置、撮像方法、及びプログラム
JP2020013842A (ja) * 2018-07-17 2020-01-23 ソニーセミコンダクタソリューションズ株式会社 光電変換素子及び受光装置
CN112866544B (zh) * 2019-11-12 2022-08-12 Oppo广东移动通信有限公司 相位差的获取方法、装置、设备及存储介质
CN111832433B (zh) * 2020-06-24 2023-12-29 奇点微(上海)光电科技有限公司 一种由图像提取物体特性的装置及其工作方法

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147477A (ja) 1999-11-19 2001-05-29 Konica Corp カメラ
US7092950B2 (en) 2001-06-29 2006-08-15 Microsoft Corporation Method for generic object oriented description of structured data (GDL)
MX339524B (es) 2001-10-11 2016-05-30 Wyeth Corp Composiciones inmunogenicas novedosas para la prevencion y tratamiento de enfermedad meningococica.
JP2005351825A (ja) 2004-06-14 2005-12-22 Nitto Denko Corp 欠陥検査装置
KR100794527B1 (ko) 2006-07-05 2008-01-17 연세대학교 산학협력단 광활성 방향족 중합체 및 이의 제조방법
JP5067841B2 (ja) 2007-04-06 2012-11-07 キヤノン株式会社 撮像装置、印刷装置、制御方法、プログラム、及び記憶媒体
JP5219865B2 (ja) 2008-02-13 2013-06-26 キヤノン株式会社 撮像装置及び焦点制御方法
JP2011059337A (ja) 2009-09-09 2011-03-24 Fujifilm Corp 撮像装置
JP2012222602A (ja) 2011-04-08 2012-11-12 Sony Corp 撮像装置及び撮像システム
JP5629832B2 (ja) * 2011-09-30 2014-11-26 富士フイルム株式会社 撮像装置及び位相差画素の感度比算出方法
JP5979849B2 (ja) 2011-11-21 2016-08-31 キヤノン株式会社 撮像素子及び撮像装置
JP5914055B2 (ja) 2012-03-06 2016-05-11 キヤノン株式会社 撮像装置
CN108401114A (zh) * 2012-05-07 2018-08-14 株式会社尼康 焦点检测装置
WO2014080674A1 (ja) 2012-11-22 2014-05-30 富士フイルム株式会社 撮像装置、デフォーカス量演算方法、及び撮像光学系
JP5635584B2 (ja) * 2012-12-20 2014-12-03 オリンパスイメージング株式会社 撮影機器、カメラシステム及びフォーカス制御のための情報を算出する方法
JP5955417B2 (ja) 2013-01-04 2016-07-20 富士フイルム株式会社 画像処理装置、撮像装置、プログラム及び画像処理方法
WO2014141561A1 (ja) * 2013-03-13 2014-09-18 富士フイルム株式会社 撮像装置、信号処理方法、信号処理プログラム
JP6186900B2 (ja) * 2013-06-04 2017-08-30 ソニー株式会社 固体撮像装置、電子機器、レンズ制御方法、および撮像モジュール
JP6124720B2 (ja) * 2013-07-22 2017-05-10 オリンパス株式会社 撮像装置、画像処理方法及び画像処理プログラム
CN105452926B (zh) * 2013-09-05 2018-06-22 富士胶片株式会社 摄像装置及对焦控制方法
WO2015045795A1 (ja) 2013-09-27 2015-04-02 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP5946970B2 (ja) 2013-09-27 2016-07-06 富士フイルム株式会社 撮像装置及び撮像方法
WO2015045785A1 (ja) 2013-09-30 2015-04-02 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP2015129846A (ja) 2014-01-07 2015-07-16 キヤノン株式会社 撮像装置およびその制御方法
JP6027287B2 (ja) * 2014-03-28 2016-11-16 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP2016145958A (ja) 2015-01-28 2016-08-12 パナソニックIpマネジメント株式会社 自動合焦装置、撮像装置及び自動合焦方法
JP2016143951A (ja) 2015-01-30 2016-08-08 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP6712506B2 (ja) * 2016-06-23 2020-06-24 オリンパス株式会社 焦点検出装置および焦点検出方法
US10313579B2 (en) 2017-08-31 2019-06-04 Qualcomm Incorporated Dual phase detection auto focus camera sensor data processing
CN111316161B (zh) * 2017-09-28 2021-11-23 富士胶片株式会社 摄像装置、信息获取方法及信息获取程序

Also Published As

Publication number Publication date
CN111133378A (zh) 2020-05-08
JPWO2019065555A1 (ja) 2020-11-05
US20200228723A1 (en) 2020-07-16
CN111133378B (zh) 2021-04-23
US11201999B2 (en) 2021-12-14
WO2019065555A1 (ja) 2019-04-04

Similar Documents

Publication Publication Date Title
JP6780745B2 (ja) 電子機器
TWI462055B (zh) 具有合成全色影像之彩色濾光器陣列影像
JP6911136B2 (ja) 撮像装置、情報取得方法及び情報取得プログラム
US10791260B2 (en) Imaging device, information acquisition method, and information acquisition program
JPWO2019087928A1 (ja) 撮像装置、ファインダ装置、撮像装置の制御方法、ファインダ装置の制御方法、撮像装置の制御プログラム及びファインダ装置の制御プログラム
US10056421B2 (en) Imaging device and imaging method
JP2013042428A (ja) 撮像装置及び画像処理方法
JP6998454B2 (ja) 撮像装置、撮像方法、プログラム及び記録媒体
JP2016143951A (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP4281199B2 (ja) 電子カメラ
US11483488B2 (en) Imaging apparatus, inter-exposure zoom imaging method, program, and recording medium
WO2019065553A1 (ja) 撮像装置、撮像方法及び撮像プログラム
JP5597942B2 (ja) 電子カメラ
JP2008283477A (ja) 画像処理装置及び画像処理方法
JP6875603B2 (ja) 撮像装置、撮像方法、及びプログラム
JP2010107900A (ja) 撮像装置、複眼撮像装置、撮像方法及びプログラム
JP6089390B2 (ja) 撮像装置および信号読み出し方法
JP2015204579A (ja) 撮像装置
JP4973369B2 (ja) 画像処理装置および撮像装置
JP2010232909A (ja) 撮像装置及びその駆動制御方法
JP2016019022A (ja) 撮像装置、撮像装置の制御方法及びプログラム
JP2009020175A (ja) カメラ

Legal Events

Date Code Title Description
A529 Written submission of copy of amendment under article 34 pct

Free format text: JAPANESE INTERMEDIATE CODE: A5211

Effective date: 20200325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200521

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200521

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210629

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210707

R150 Certificate of patent or registration of utility model

Ref document number: 6911136

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250