JP2014228727A5 - - Google Patents

Download PDF

Info

Publication number
JP2014228727A5
JP2014228727A5 JP2013108818A JP2013108818A JP2014228727A5 JP 2014228727 A5 JP2014228727 A5 JP 2014228727A5 JP 2013108818 A JP2013108818 A JP 2013108818A JP 2013108818 A JP2013108818 A JP 2013108818A JP 2014228727 A5 JP2014228727 A5 JP 2014228727A5
Authority
JP
Japan
Prior art keywords
image
subject
distance
image data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013108818A
Other languages
Japanese (ja)
Other versions
JP6071748B2 (en
JP2014228727A (en
Filing date
Publication date
Application filed filed Critical
Priority to JP2013108818A priority Critical patent/JP6071748B2/en
Priority claimed from JP2013108818A external-priority patent/JP6071748B2/en
Publication of JP2014228727A publication Critical patent/JP2014228727A/en
Publication of JP2014228727A5 publication Critical patent/JP2014228727A5/ja
Application granted granted Critical
Publication of JP6071748B2 publication Critical patent/JP6071748B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

上記課題を解決するために、本発明に係る装置は、各マイクロレンズに対して撮像光学系の射出瞳の異なる領域をそれぞれ通過した光束を受光して光電変換する複数の光電変換部を撮像素子が備え、該撮像素子の出力する像信号を用いて撮像光学系の焦点調節を行う撮像装置であって、前記撮像素子から取得した複数の像信号から左目用画像および右目用画像を含む画像データを生成する画像生成手段と、前記画像データを取得して画像を表示する表示手段と、前記画像データを取得して被写体像を特定する被写体特定手段と、前記画像データおよび前記被写体特定手段により特定された被写体を示す情報を取得し、前記左目用画像および右目用画像に含まれる被写体像について当該画像間の像ズレ量を算出し、前記被写体の視差により当該被写体までの距離を算出する被写体距離算出手段と、前記表示手段が撮像された画像を表示しているときに、前記撮像光学系を構成する焦点調節用レンズを移動させることにより、前記被写体距離算出手段が算出した前記距離にピントを合わせるレンズ駆動手段を備え、前記被写体特定手段により特定される被写体までの距離について、前記被写体距離算出手段が複数の距離情報を算出した場合、前記被写体までの距離の最大値と最小値の差を算出して閾値と比較し、差が閾値以上である場合、合焦不能の旨を報知する。 In order to solve the above-described problems, an apparatus according to the present invention includes a plurality of photoelectric conversion units that receive and photoelectrically convert light beams that have passed through different regions of an exit pupil of an imaging optical system with respect to each microlens. An image pickup apparatus that performs focus adjustment of an image pickup optical system using an image signal output from the image pickup device, and includes image data including a left-eye image and a right-eye image from a plurality of image signals acquired from the image pickup device Image generating means for generating image, display means for acquiring the image data and displaying the image, subject specifying means for acquiring the image data and specifying a subject image, and specifying by the image data and the subject specifying means Information indicating the imaged subject is obtained, and an image shift amount between the images for the subject images included in the left-eye image and the right-eye image is calculated. A subject distance calculating unit that calculates a distance to a subject, and a focus adjustment lens that constitutes the imaging optical system when the display unit displays a captured image, thereby moving the subject distance A lens driving unit that focuses on the distance calculated by the calculating unit, and when the subject distance calculating unit calculates a plurality of distance information for the distance to the subject specified by the subject specifying unit, It calculates the difference between the maximum value and the minimum value of the distance is compared with a threshold, when the difference is equal to or larger than the threshold, you notify the fact of focusing impossible.

Claims (10)

各マイクロレンズに対して撮像光学系の射出瞳の異なる領域をそれぞれ通過した光束を受光して光電変換する複数の光電変換部を撮像素子が備え、該撮像素子の出力する像信号を用いて撮像光学系の焦点調節を行う撮像装置であって、
前記撮像素子から取得した複数の像信号から左目用画像および右目用画像を含む画像データを生成する画像生成手段と、
前記画像データを取得して画像を表示する表示手段と、
前記画像データを取得して被写体像を特定する被写体特定手段と、
前記画像データおよび前記被写体特定手段により特定された被写体を示す情報を取得し、前記左目用画像および右目用画像に含まれる被写体像について当該画像間の像ズレ量を算出し、前記被写体の視差により当該被写体までの距離を算出する被写体距離算出手段と、
前記表示手段が撮像された画像を表示しているときに、前記撮像光学系を構成する焦点調節用レンズを移動させることにより、前記被写体距離算出手段が算出した前記距離にピントを合わせるレンズ駆動手段を備え
前記被写体特定手段により特定される被写体までの距離について、前記被写体距離算出手段が複数の距離情報を算出した場合、前記被写体までの距離の最大値と最小値の差を算出して閾値と比較し、差が閾値以上である場合、合焦不能の旨を報知することを特徴とする撮像装置。
The image sensor has a plurality of photoelectric conversion units that receive and photoelectrically convert light beams that have passed through different areas of the exit pupil of the imaging optical system for each microlens, and perform imaging using image signals output from the image sensor An imaging device for adjusting the focus of an optical system,
Image generating means for generating image data including a left-eye image and a right-eye image from a plurality of image signals acquired from the image sensor;
Display means for acquiring the image data and displaying the image;
Subject specifying means for acquiring the image data and specifying a subject image;
Obtaining the image data and information indicating the subject specified by the subject specifying means, calculating an image shift amount between the images for the subject images included in the left-eye image and the right-eye image, and using the parallax of the subject Subject distance calculating means for calculating the distance to the subject;
Lens driving means for focusing on the distance calculated by the subject distance calculation means by moving a focus adjustment lens that constitutes the imaging optical system when the display means is displaying an imaged image. equipped with a,
For the distance to the subject specified by the subject specifying means, when the subject distance calculation means calculates a plurality of distance information, the difference between the maximum value and the minimum value of the distance to the subject is calculated and compared with a threshold value. If the difference is equal to or larger than the threshold, the image pickup apparatus characterized that you notify the fact of focusing impossible.
前記画像生成手段から取得した画像データを用いてコントラスト値を算出してレンズ制御量を出力する合焦制御手段と、
前記被写体距離算出手段が算出した距離、または前記合焦制御手段の出力するレンズ制御量に切り替えて前記レンズ駆動手段に出力する切替手段を備えることを特徴とする請求項1に記載の撮像装置。
A focus control means for calculating a contrast value using the image data acquired from the image generation means and outputting a lens control amount;
The imaging apparatus according to claim 1, further comprising a switching unit that switches to the distance calculated by the subject distance calculation unit or the lens control amount output from the focusing control unit and outputs the lens control unit to the lens driving unit.
前記切替手段は、前記被写体距離算出手段が前記被写体までの距離を算出できない場合に、前記合焦制御手段の出力するレンズ制御量に切り替えて前記レンズ駆動手段に出力することを特徴とする請求項2に記載の撮像装置。   The switching means, when the subject distance calculation means cannot calculate the distance to the subject, switches to the lens control amount output by the focus control means and outputs to the lens driving means. 2. The imaging device according to 2. 前記画像生成手段により生成される表示用画像データを取得して前記表示手段に画像を表示する制御を行う表示制御手段と、
前記表示手段により表示された画像にて被写体像を指示する被写体指示手段を備え、
前記被写体特定手段は、前記被写体指示手段により指示された被写体像を特定することを特徴とする請求項1ないし3のいずれか1項に記載の撮像装置。
Display control means for performing control for acquiring display image data generated by the image generation means and displaying an image on the display means;
Subject indicating means for indicating a subject image in the image displayed by the display means;
The imaging apparatus according to claim 1, wherein the subject specifying unit specifies a subject image instructed by the subject instructing unit.
前記画像生成手段は、前記複数の像信号から被写体抽出用画像のデータを生成し、
前記被写体特定手段は、前記被写体抽出用画像から被写体像を画像認識により特定することを特徴とする請求項1ないし3のいずれか1項に記載の撮像装置。
The image generation means generates image data for subject extraction from the plurality of image signals,
The imaging apparatus according to claim 1, wherein the subject specifying unit specifies a subject image from the subject extraction image by image recognition.
前記左目用画像および右目用画像を含む画像データを前記画像生成手段から取得して前記撮像装置から物体までの距離を表示用画像と関連付けた距離マップを生成して、前記被写体距離算出手段に出力する距離算出手段を備えることを特徴とする請求項1ないし5のいずれか1項に記載の撮像装置。   Image data including the image for the left eye and the image for the right eye is acquired from the image generation unit, a distance map in which the distance from the imaging device to the object is associated with the display image is generated, and output to the subject distance calculation unit The imaging apparatus according to claim 1, further comprising a distance calculation unit that performs the calculation. 前記表示手段は、前記距離算出手段により生成される距離マップを取得し、距離情報を表示することを特徴とする請求項6に記載の撮像装置。   The imaging apparatus according to claim 6, wherein the display unit acquires a distance map generated by the distance calculation unit and displays distance information. 前記被写体距離算出手段は、前記閾値を被写界深度に応じて変更することを特徴とする請求項1ないし7のいずれか1項に記載の撮像装置。 The object distance calculating means, the image pickup apparatus according to any one of claims 1 to 7, characterized in that for changing the threshold depending on the depth of field. 前記表示手段は、前記画像データを取得して立体画像を表示することを特徴とする請求項1ないしのいずれか1項に記載の撮像装置。 The display means, the image pickup apparatus according to any one of claims 1 to 8, wherein the displaying a stereoscopic image by acquiring the image data. 各マイクロレンズに対して撮像光学系の射出瞳の異なる領域をそれぞれ通過した光束を受光して光電変換する複数の光電変換部を撮像素子が備え、該撮像素子の出力する像信号を用いて撮像光学系の焦点調節を行う撮像装置にて実行される制御方法であって、
前記撮像素子から取得した複数の像信号から左目用画像および右目用画像を含む画像データを生成する画像生成ステップと、
前記画像データを取得して被写体像を特定する被写体特定ステップと、
前記画像データおよび前記被写体特定ステップで特定された被写体を示す情報を取得し、前記左目用画像および右目用画像に含まれる被写体像について当該画像間の像ズレ量を算出し、前記被写体の視差により当該被写体までの距離を算出する被写体距離算出ステップと、
撮像された画像を表示手段に表示しているときに、前記撮像光学系を構成する焦点調節用レンズを移動させることにより、前記被写体距離算出ステップで算出した前記距離にピントを合わせるレンズ駆動ステップを有し、
前記被写体特定ステップにおいて特定される被写体までの距離について、前記被写体距離算出ステップにおいて複数の距離情報が算出された場合、前記被写体までの距離の最大値と最小値の差を算出して閾値と比較し、差が閾値以上である場合、合焦不能の旨を報知することを特徴とする撮像装置の制御方法。
The image sensor has a plurality of photoelectric conversion units that receive and photoelectrically convert light beams that have passed through different areas of the exit pupil of the imaging optical system for each microlens, and perform imaging using image signals output from the image sensor A control method executed by an imaging apparatus that performs focus adjustment of an optical system,
An image generation step of generating image data including a left-eye image and a right-eye image from a plurality of image signals acquired from the image sensor;
A subject specifying step of acquiring the image data and specifying a subject image;
Obtaining the image data and information indicating the subject specified in the subject specifying step, calculating an image shift amount between the images for the subject images included in the left-eye image and the right-eye image, and using the parallax of the subject A subject distance calculating step for calculating a distance to the subject;
A lens driving step of focusing on the distance calculated in the subject distance calculation step by moving a focus adjustment lens that constitutes the imaging optical system when the captured image is displayed on the display unit; Yes, and
For the distance to the subject specified in the subject specifying step, when a plurality of distance information is calculated in the subject distance calculating step, the difference between the maximum value and the minimum value of the distance to the subject is calculated and compared with a threshold value and, when the difference is equal to or greater than the threshold, the control method of an image pickup apparatus which is characterized that you notify the fact of focusing impossible.
JP2013108818A 2013-05-23 2013-05-23 Imaging apparatus and control method thereof Active JP6071748B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013108818A JP6071748B2 (en) 2013-05-23 2013-05-23 Imaging apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013108818A JP6071748B2 (en) 2013-05-23 2013-05-23 Imaging apparatus and control method thereof

Publications (3)

Publication Number Publication Date
JP2014228727A JP2014228727A (en) 2014-12-08
JP2014228727A5 true JP2014228727A5 (en) 2016-07-07
JP6071748B2 JP6071748B2 (en) 2017-02-01

Family

ID=52128606

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013108818A Active JP6071748B2 (en) 2013-05-23 2013-05-23 Imaging apparatus and control method thereof

Country Status (1)

Country Link
JP (1) JP6071748B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6616668B2 (en) * 2015-11-17 2019-12-04 キヤノン株式会社 Image processing apparatus and image processing method

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5633181B2 (en) * 2010-05-07 2014-12-03 株式会社ニコン Depth map output device
JP2011259168A (en) * 2010-06-08 2011-12-22 Fujifilm Corp Stereoscopic panoramic image capturing device
JP2012124650A (en) * 2010-12-07 2012-06-28 Fujifilm Corp Imaging apparatus, and imaging method
JP5814692B2 (en) * 2011-08-15 2015-11-17 キヤノン株式会社 Imaging apparatus, control method therefor, and program
JP5852371B2 (en) * 2011-09-01 2016-02-03 キヤノン株式会社 Imaging apparatus and control method thereof
CN103843331B (en) * 2011-09-30 2016-03-02 富士胶片株式会社 Image pick-up device and image pickup method

Similar Documents

Publication Publication Date Title
JP2012142918A5 (en)
JP6159097B2 (en) Image processing apparatus, imaging apparatus, control method, and program
US9503633B2 (en) Image processing apparatus, image capturing apparatus, image processing method, and storage medium
GB201217302D0 (en) Image pickup apparatus and focus detection method
EP2615825A3 (en) Image processing apparatus, image sensing appparatus, control method, program, and recording medium
RU2565855C1 (en) Image capturing device, method of controlling said device and programme
JP2014146023A5 (en)
JP2013201752A5 (en)
JP2014057181A5 (en)
JP2015138200A5 (en) Focus adjustment device and focus adjustment method
EP2683154A3 (en) Image pickup apparatus and lens apparatus
JP2014064213A5 (en)
JP2013041103A5 (en)
CN102447922A (en) Method for synthesizing double-lens image into single-lens image
JP5929037B2 (en) Imaging device
JP2012222641A (en) Image processing apparatus, image processing method, and program
US20120242791A1 (en) 3-d video processing device and 3-d video processing method
JP2012124766A5 (en)
JP2015102735A (en) Focus detection device and imaging device
JP2015212772A5 (en)
JP2012257105A (en) Stereoscopic image obtaining apparatus
KR20120064477A (en) 3d camera capable of acquiring depth information, acquisition method of depth information and the recording medium thereof
JP2014228727A5 (en)
JP2013078101A5 (en) Image processing device
JP6039301B2 (en) IMAGING DEVICE, IMAGING SYSTEM, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM