JP2017028641A - 画像処理装置、撮像装置、画像処理方法およびプログラム - Google Patents
画像処理装置、撮像装置、画像処理方法およびプログラム Download PDFInfo
- Publication number
- JP2017028641A JP2017028641A JP2015148278A JP2015148278A JP2017028641A JP 2017028641 A JP2017028641 A JP 2017028641A JP 2015148278 A JP2015148278 A JP 2015148278A JP 2015148278 A JP2015148278 A JP 2015148278A JP 2017028641 A JP2017028641 A JP 2017028641A
- Authority
- JP
- Japan
- Prior art keywords
- distance
- distance information
- image processing
- amount
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
Description
本発明の目的は、被写体の距離分布に関連するデータを統合して、距離に対して距離分解能が同程度となる距離情報を生成することである。
本発明の第1実施形態について、図1から図6を参照して説明する。本実施形態では、異なる合焦位置で撮像した画像に対してDFD測距方式を用いて複数の距離情報を算出し、測距分解能が同程度となる距離情報を算出する例を説明する。図1は本実施形態に係る画像処理装置を適用した撮像装置100の構成例を示すブロック図である。撮像装置100の制御部はCPU(中央演算処理装置)を備え、メモリから読み出したプログラムを実行することにより、以下に説明する各種の処理を実現する。
次に本発明の第2実施形態を説明する。本実施形態では視差測距方式への適用例を示す。つまり第2実施形態と第1実施形態との差異は、視差画像を用いた視差測距方式にある。異なる合焦位置で撮像された視差画像に対して視差測距方式を用いて複数の距離情報を算出する処理が実行され、複数の距離情報を合成することで測距分解能が揃った距離情報が算出される。図7は本実施形態に係る画像処理装置を適用した撮像装置700のシステム構成を例示するブロック図である。なお、撮影条件は第1実施形態にて説明した図2と同一である。
撮像された画像の分割領域(微小ブロック)における一対の画素データを、E(1)〜E(m)と、F(1)〜F(m)として一般化して表現する。mはデータ数を表す自然数の変数である。第1のデータ系列E(1)〜E(m)は、例えばA像の画素データに対応し、第2のデータ系列F(1)〜F(m)はB像の画素データに対応する。第1のデータ系列E(1)〜E(m)に対し、第2のデータ系列F(1)〜F(m)を相対的にずらしながら、下記式(5)により相関量C(k)の演算が実行される。kは、2つのデータ列間の相対的シフト量、つまり像ずれ量を表し、その値は整数である。
C(k) = Σ | E(n) − F(n+k) | ・・・(5)
x = kj+ D / SLOP ・・・(6)
C(x)= C(kj)−|D| ・・・(7)
D ={C(kj −1)− C(kj+1)} / 2 ・・・(8)
SLOP=MAX{C(kj+1)−C(kj),C(kj−1)−C(kj)} ・・・(9)
シフト量xは実数値をとる。式(6)で求めたシフト量xより、被写体像面の予定結像面に対するデフォーカス量(DEFと記す)を、下記式(10)で求めることができる。
DEF= KX ・PY ・x ・・・(10)
本実施形態によれば、視差測距方式を用いて算出される複数の距離情報を合成することで、距離に対する画像間の相関量の精度差(距離情報に対する視差量の変化量)を小さくし、距離分解能の揃った距離情報を得ることができる。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
101,701 撮像部
102,702 画像選択部
103 DFD処理部
104,704 オフセット補正部
105,705 合成比率決定部
106,706 距離情報合成部
703 視差測距処理部
Claims (17)
- 撮影条件の異なる複数の画像を取得する取得手段と、
前記取得手段により取得された前記複数の画像間の相関量を算出して被写体の距離分布に関連するデータを生成する生成手段と、
前記生成手段によって生成されたデータごとに決定される合成比率を用いて当該データを合成することにより、距離に対する画像間の相関量の精度差を小さくして距離分解能を揃える統合手段を有することを特徴とする画像処理装置。 - 前記生成手段は、焦点位置または絞り値が異なる前記複数の画像間での暈けの相関量から被写体の距離分布に関連するデータを生成することを特徴とする請求項1に記載の画像処理装置。
- 前記相関量の精度は、距離情報に対する暈けの相関量の変化量であることを特徴とする請求項2に記載の画像処理装置。
- 前記統合手段は、
前記合成比率を決定する決定手段と、
前記決定手段により決定された前記合成比率にしたがって前記複数のデータを合成する合成手段を有することを特徴とする請求項1から3のいずれか1項に記載の画像処理装置。 - 前記決定手段は、前記生成手段によって生成された複数のデータを取得して距離情報に対する合成比率を決定することを特徴とする請求項4に記載の画像処理装置。
- 前記生成手段は、異なる焦点位置でそれぞれ撮像された画像から前記距離情報を算出し、
前記決定手段は、複数の前記距離情報から基準となる基準距離情報を選択し、前記基準距離情報および前記基準距離情報とは異なる距離情報に対する合成比率をそれぞれ決定することを特徴とする請求項5に記載の画像処理装置。 - 前記合成比率の特性は、複数の焦点位置のうちで隣り合う第1の焦点位置と第2の焦点位置との間の中間位置での合成比率が相対的に高く、前記中間位置から離れるにつれて合成比率が相対的に低くなる特性であることを特徴とする請求項6に記載の画像処理装置。
- 前記基準距離情報に対する合成比率の特性は、前記基準距離情報とは異なる距離情報に対する合成比率の特性に比べて合成比率を高くする範囲が広いことを特徴とする請求項7に記載の画像処理装置。
- 前記決定手段は、前記第1の焦点位置の像面と前記第2の焦点位置の像面との間の距離に相当するフォーカスブラケット量に応じて前記合成比率の特性を変更することを特徴とする請求項7に記載の画像処理装置。
- 前記決定手段は、第1のフォーカスブラケット量における前記合成比率の特性が、前記第1のフォーカスブラケット量より大きい第2のフォーカスブラケット量における前記合成比率の特性に比べて合成比率を高くする範囲を狭く設定することを特徴とする請求項9に記載の画像処理装置。
- 前記統合手段は、前記基準距離情報とは異なる距離情報に対して、前記基準距離情報との差に対応するオフセット量をそれぞれ加算する補正手段を備えることを特徴とする請求項6から10のいずれか1項に記載の画像処理装置。
- 前記生成手段は視差測距方式により、前記複数の画像間の視差量から被写体の距離分布に関連するデータを生成することを特徴とする請求項1に記載の画像処理装置。
- 前記相関量の精度は、距離情報に対する視差量の変化量であることを特徴とする請求項12に記載の画像処理装置。
- 請求項1から13のいずれか1項に記載の画像処理装置と、
撮像光学系を通して被写体を撮像する撮像素子を備え、
前記撮像素子の画素部は、前記撮像光学系にて異なる瞳領域をそれぞれ通過した光を受光して光電変換する複数の光電変換部を有することを特徴とする撮像装置。 - 前記被写体の距離分布に関連するデータは、デフォーカス量または当該デフォーカス量を物体距離に変換した距離のデータであることを特徴とする請求項14に記載の撮像装置。
- 撮影条件の異なる複数の画像を処理する画像処理装置にて実行される画像処理方法であって、
前記複数の画像を取得する取得ステップと、
取得された前記複数の画像間の相関量を算出して被写体の距離分布に関連するデータを生成する生成ステップと、
前記生成ステップで生成されたデータごとに決定される合成比率を用いて当該データを合成することにより、距離に対する画像間の相関量の精度差を小さくして距離分解能を揃える統合ステップを有することを特徴とする画像処理方法。 - 請求項16に記載の各ステップを画像処理装置のコンピュータに実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015148278A JP6598550B2 (ja) | 2015-07-28 | 2015-07-28 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015148278A JP6598550B2 (ja) | 2015-07-28 | 2015-07-28 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017028641A true JP2017028641A (ja) | 2017-02-02 |
JP6598550B2 JP6598550B2 (ja) | 2019-10-30 |
Family
ID=57946177
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015148278A Expired - Fee Related JP6598550B2 (ja) | 2015-07-28 | 2015-07-28 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6598550B2 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011095027A (ja) * | 2009-10-28 | 2011-05-12 | Kyocera Corp | 撮像装置 |
JP2014232181A (ja) * | 2013-05-28 | 2014-12-11 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP2015034732A (ja) * | 2013-08-08 | 2015-02-19 | キヤノン株式会社 | 距離算出装置、撮像装置および距離算出方法 |
-
2015
- 2015-07-28 JP JP2015148278A patent/JP6598550B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011095027A (ja) * | 2009-10-28 | 2011-05-12 | Kyocera Corp | 撮像装置 |
JP2014232181A (ja) * | 2013-05-28 | 2014-12-11 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP2015034732A (ja) * | 2013-08-08 | 2015-02-19 | キヤノン株式会社 | 距離算出装置、撮像装置および距離算出方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6598550B2 (ja) | 2019-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6608148B2 (ja) | 距離情報生成装置、撮像装置、距離情報生成方法および距離情報生成プログラム | |
US9208396B2 (en) | Image processing method and device, and program | |
JP5173665B2 (ja) | 画像撮影装置およびその距離演算方法と合焦画像取得方法 | |
JP5832424B2 (ja) | 撮像装置及び距離計測方法 | |
CN109255810B (zh) | 图像处理装置及图像处理方法 | |
JP6489932B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
JP6071257B2 (ja) | 画像処理装置及びその制御方法、並びにプログラム | |
JP7234057B2 (ja) | 画像処理方法、画像処理装置、撮像装置、レンズ装置、プログラム、記憶媒体、および、画像処理システム | |
US11347133B2 (en) | Image capturing apparatus, image processing apparatus, control method, and storage medium | |
JP7451120B2 (ja) | 画像処理装置および画像処理方法、撮像装置、プログラム | |
JP2016066995A (ja) | 像ズレ量算出装置、撮像装置、および像ズレ量算出方法 | |
JP6415359B2 (ja) | 焦点検出装置、撮像装置、焦点検出方法および焦点検出プログラム | |
JP6598550B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
US11468586B2 (en) | Three-dimensional measurement apparatus, image capturing apparatus, control method, and recording medium | |
JP7373297B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018074362A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6625184B2 (ja) | 焦点検出装置、撮像装置、焦点検出方法および焦点検出プログラム | |
JP6652294B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP6608238B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム | |
JP2018022984A (ja) | 画像処理装置及びその制御方法、プログラム並びに撮像装置 | |
JP2023069386A (ja) | 画像計測装置、方法およびプログラム | |
JP2017083401A (ja) | 距離検出装置、撮像装置、および距離検出方法 | |
JP2023145262A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2016100663A (ja) | 画像処理装置、撮像装置、画像処理システム、画像処理方法、および画像処理プログラム | |
JP2020086824A (ja) | 画像処理装置、画像処理方法、撮像装置およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180625 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190425 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190514 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191001 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6598550 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |