JP2014036347A - 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 - Google Patents
撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 Download PDFInfo
- Publication number
- JP2014036347A JP2014036347A JP2012176657A JP2012176657A JP2014036347A JP 2014036347 A JP2014036347 A JP 2014036347A JP 2012176657 A JP2012176657 A JP 2012176657A JP 2012176657 A JP2012176657 A JP 2012176657A JP 2014036347 A JP2014036347 A JP 2014036347A
- Authority
- JP
- Japan
- Prior art keywords
- image
- parallax
- correction
- pixel
- imaging apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/232—Image signal generators using stereoscopic image cameras using a single 2D image sensor using fly-eye lenses, e.g. arrangements of circular lenses
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/246—Calibration of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/218—Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Abstract
【解決手段】立体画像を生成する撮像装置であって、1つのマイクロレンズに対して複数の画素を配置して構成された単位画素セルを備え、単位画素セルの画素ごとに分離された第1の像信号および第2の像信号を出力する撮像素子114と、第1の像信号と前記第2の像信号との間の像ずれ量を視差として算出する視差検出手段123と、絞り111の変化に応じた視差の変化量を低減するように補正を行う画像補正手段120とを有する。
【選択図】図1
Description
ここで、Hは過焦点オフセット、Kは係数(傾き係数)である。係数Kは、レンズユニット101の絞り111に依存する左右像間の分割瞳の重心間距離B(図6(a)ではB1、図6(b)ではB2)と、レンズ110と撮像素子114との焦点距離pから、以下の式(3)のように算出される。
図8は、図7の関係に基づいて、図6(a)、(b)のそれぞれの状態におけるデフォーカス量Dと左右像間の像ずれ量(視差)との関係図である。本実施例では、図6(a)の絞り径d1を立体感補正目標である基準の条件とし、絞り径d1は、撮影時に使用している撮影光学系(レンズユニット101)の設定可能な最大の絞り径(開放絞り)であるとする。ここで、開放絞りとする理由は、装着された撮影光学系(レンズユニット101)の中で設定可能な最大の像ずれ量(視差)となる条件であるためである。本実施例において、画像補正手段120は、視差が絞り111の開放絞り時の視差になるように、または、開放絞り時の視差に近づくように補正を行う。
すなわち、基準となる絞り径d1の傾き係数K1、および、実際に撮影した絞り径d2での傾き係数K2に基づいて、絞り111に依存する像ずれ量(視差)の補正倍率(視差倍率)である立体感補正係数Zを求める。立体感補正係数Z(視差倍率)を用いることにより、絞り径に依存せずに、左右間の像ずれ量(視差)を得ることができる。
すなわち、左右間の像ずれ量X(視差)が、補正目標の像ずれ量X’(視差)になるように、各々の画素の像ずれ量(視差)を水平方向にZ倍だけ拡大した画像に補正することにより、立体感が補正される。以上のように、本実施例では、立体感を補正するためのパラメータ(立体感補正係数Z)を、レンズユニット101(撮影光学系)の絞り情報に基づいて取得する。
111 絞り
114 撮像素子
120 画像補正手段
123 視差検出手段
Claims (10)
- 立体画像を生成する撮像装置であって、
1つのマイクロレンズに対して複数の画素を配置して構成された単位画素セルを備え、該単位画素セルの画素ごとに分離された第1の像信号および第2の像信号を出力する撮像素子と、
前記第1の像信号と前記第2の像信号との間の像ずれ量を視差として算出する視差検出手段と、
絞りの変化に応じた前記視差の変化量を低減するように補正を行う画像補正手段と、を有することを特徴とする撮像装置。 - 前記画像補正手段は、前記絞りに応じた視差倍率を用いて前記補正を行うことを特徴とする請求項1に記載の撮像装置。
- 前記画像補正手段は、前記視差が前記絞りの開放絞り時の視差に近づくように前記補正を行うことを特徴とする請求項1または2に記載の撮像装置。
- 前記画像補正手段は、前記視差が撮影開始時の視差に近づくように前記補正を行うことを特徴とする請求項1または2に記載の撮像装置。
- 前記撮像装置は、前記画像補正手段による前記補正に用いられるパラメータを、本撮影前に取得するモードを有することを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。
- 前記画像補正手段は、連続撮影の際には、該連続撮影が終了するまで、撮影初期に設定されたパラメータを用いて前記補正を行うことを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。
- 請求項1乃至6のいずれか1項に記載の撮像装置と、
光学像を前記撮像素子に結像させる撮像光学系と、を有することを特徴とする撮像システム。 - 立体画像を生成する撮像装置の制御方法であって、
1つのマイクロレンズに対して複数の画素を配置して構成された単位画素セルを有する撮像素子を用いて、該単位画素セルの画素ごとに分離された第1の像信号および第2の像信号を出力するステップと、
前記第1の像信号と前記第2の像信号との間の像ずれ量を視差として算出するステップと、
絞りの変化に応じた前記視差の変化量を低減するように補正を行うステップと、を有することを特徴とする撮像装置の制御方法。 - 請求項8に記載の撮像装置の制御方法の手順が記述されたコンピュータで実行可能なプログラム。
- コンピュータに、請求項8に記載の撮像装置の制御方法を実行させるためのプログラムが記憶されたコンピュータ読み取り可能な記憶媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012176657A JP6039301B2 (ja) | 2012-08-09 | 2012-08-09 | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 |
EP13178988.5A EP2696587B1 (en) | 2012-08-09 | 2013-08-01 | Image pickup apparatus, image pickup system, method of controlling image pickup apparatus, program, and storage medium |
EP20156469.7A EP3681157A1 (en) | 2012-08-09 | 2013-08-01 | Image pickup apparatus, image pickup system, method of controlling image pickup apparatus, program, and storage medium |
US13/957,842 US9374572B2 (en) | 2012-08-09 | 2013-08-02 | Image pickup apparatus, image pickup system, method of controlling image pickup apparatus, and non-transitory computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012176657A JP6039301B2 (ja) | 2012-08-09 | 2012-08-09 | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014036347A true JP2014036347A (ja) | 2014-02-24 |
JP6039301B2 JP6039301B2 (ja) | 2016-12-07 |
Family
ID=48914129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012176657A Expired - Fee Related JP6039301B2 (ja) | 2012-08-09 | 2012-08-09 | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9374572B2 (ja) |
EP (2) | EP3681157A1 (ja) |
JP (1) | JP6039301B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013172292A (ja) * | 2012-02-21 | 2013-09-02 | Sony Corp | 撮像装置及び撮像素子アレイ |
DE112013004760B4 (de) * | 2012-09-27 | 2017-10-19 | Fujifilm Corporation | Bilderfassungsvorrichtung und Bildverarbeitungsverfahren |
CN108885335B (zh) * | 2016-03-30 | 2021-10-22 | 索尼奥林巴斯医疗解决方案公司 | 医用立体观察装置、医用立体观察方法以及程序 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010068018A (ja) * | 2008-09-08 | 2010-03-25 | Sony Corp | 画像処理装置、撮像装置および表示装置 |
JP2011199755A (ja) * | 2010-03-23 | 2011-10-06 | Fujifilm Corp | 撮像装置 |
JP2011197278A (ja) * | 2010-03-18 | 2011-10-06 | Fujifilm Corp | 立体撮像装置 |
WO2012002307A1 (ja) * | 2010-06-29 | 2012-01-05 | 富士フイルム株式会社 | 単眼立体撮像装置 |
JP2012147046A (ja) * | 2011-01-06 | 2012-08-02 | Sony Corp | 撮像装置および画像処理方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4027113B2 (ja) | 2002-02-19 | 2007-12-26 | キヤノン株式会社 | 撮像装置及びシステム |
KR20080106184A (ko) * | 2006-03-22 | 2008-12-04 | 파나소닉 주식회사 | 촬상 장치 |
JP4538766B2 (ja) * | 2008-08-21 | 2010-09-08 | ソニー株式会社 | 撮像装置、表示装置および画像処理装置 |
JP2010057067A (ja) * | 2008-08-29 | 2010-03-11 | Sony Corp | 撮像装置および画像処理装置 |
JP2010068182A (ja) * | 2008-09-10 | 2010-03-25 | Fujifilm Corp | 3次元撮影装置および方法並びにプログラム |
JP5185097B2 (ja) * | 2008-12-19 | 2013-04-17 | 富士フイルム株式会社 | 撮影装置および合焦位置決定方法 |
ATE551841T1 (de) * | 2009-04-22 | 2012-04-15 | Raytrix Gmbh | Digitales bildgebungsverfahren zum synthetisieren eines bildes unter verwendung der mit einer plenoptischen kamera aufgezeichneten daten |
JP2011024003A (ja) * | 2009-07-16 | 2011-02-03 | Fujifilm Corp | 立体動画記録方法および装置、動画ファイル変換方法および装置 |
JP5495683B2 (ja) * | 2009-09-10 | 2014-05-21 | キヤノン株式会社 | 撮像装置および測距方法 |
JP5387856B2 (ja) * | 2010-02-16 | 2014-01-15 | ソニー株式会社 | 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置 |
JP5669599B2 (ja) * | 2010-05-14 | 2015-02-12 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP2012123296A (ja) * | 2010-12-10 | 2012-06-28 | Sanyo Electric Co Ltd | 電子機器 |
JP5627438B2 (ja) * | 2010-12-14 | 2014-11-19 | キヤノン株式会社 | 撮像装置、その制御方法、プログラム及び記憶媒体 |
-
2012
- 2012-08-09 JP JP2012176657A patent/JP6039301B2/ja not_active Expired - Fee Related
-
2013
- 2013-08-01 EP EP20156469.7A patent/EP3681157A1/en not_active Withdrawn
- 2013-08-01 EP EP13178988.5A patent/EP2696587B1/en active Active
- 2013-08-02 US US13/957,842 patent/US9374572B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010068018A (ja) * | 2008-09-08 | 2010-03-25 | Sony Corp | 画像処理装置、撮像装置および表示装置 |
JP2011197278A (ja) * | 2010-03-18 | 2011-10-06 | Fujifilm Corp | 立体撮像装置 |
JP2011199755A (ja) * | 2010-03-23 | 2011-10-06 | Fujifilm Corp | 撮像装置 |
WO2012002307A1 (ja) * | 2010-06-29 | 2012-01-05 | 富士フイルム株式会社 | 単眼立体撮像装置 |
JP2012147046A (ja) * | 2011-01-06 | 2012-08-02 | Sony Corp | 撮像装置および画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3681157A1 (en) | 2020-07-15 |
JP6039301B2 (ja) | 2016-12-07 |
EP2696587A2 (en) | 2014-02-12 |
EP2696587B1 (en) | 2020-03-18 |
EP2696587A3 (en) | 2015-04-29 |
US9374572B2 (en) | 2016-06-21 |
US20140043437A1 (en) | 2014-02-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5320524B1 (ja) | ステレオ撮影装置 | |
JP5814692B2 (ja) | 撮像装置及びその制御方法、プログラム | |
US9681042B2 (en) | Image pickup apparatus, image pickup system, image processing device, and method of controlling image pickup apparatus | |
JP5526233B2 (ja) | 立体視用画像撮影装置およびその制御方法 | |
JP2011259168A (ja) | 立体パノラマ画像撮影装置 | |
JP2014153890A (ja) | 画像処理装置、撮像装置、制御方法、及びプログラム | |
JP6418770B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および記憶媒体 | |
JP5929037B2 (ja) | 撮像装置 | |
JP6039301B2 (ja) | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 | |
JP5611469B2 (ja) | 立体撮像装置および方法 | |
CN111127379B (zh) | 光场相机2.0的渲染方法及电子设备 | |
JP6881909B2 (ja) | 撮像装置及びその制御方法、及び画像処理装置及び方法 | |
JP2020194454A (ja) | 画像処理装置および画像処理方法、プログラム、並びに記憶媒体 | |
JP6004741B2 (ja) | 画像処理装置およびその制御方法、撮像装置 | |
JP2011242652A (ja) | 焦点検出装置およびその制御方法 | |
KR101275127B1 (ko) | 초점 가변 액체 렌즈를 이용한 3차원 이미지 촬영장치 및 방법 | |
JP2010231192A (ja) | ステレオ撮像装置 | |
WO2013005477A1 (ja) | 撮像装置、立体画像撮像方法及びプログラム | |
JP2018007205A (ja) | 画像処理装置、撮像装置、画像処理装置の制御方法及びプログラム | |
JP7134601B2 (ja) | 画像処理装置、画像処理方法、撮像装置及び撮像装置の制御方法 | |
US9602701B2 (en) | Image-pickup apparatus for forming a plurality of optical images of an object, control method thereof, and non-transitory computer-readable medium therefor | |
JP6071748B2 (ja) | 撮像装置およびその制御方法 | |
JP6900228B2 (ja) | 撮像装置、撮像システム、撮像装置の制御方法、および、プログラム | |
JP2023069386A (ja) | 画像計測装置、方法およびプログラム | |
JP2022173069A (ja) | 画像処理装置及び方法、及び、撮像装置及びその制御方法、プログラム、記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150716 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160419 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161004 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161104 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6039301 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |