JP2019035967A - 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 - Google Patents
画像処理装置、画像処理方法、および撮像装置並びにその制御方法 Download PDFInfo
- Publication number
- JP2019035967A JP2019035967A JP2018188108A JP2018188108A JP2019035967A JP 2019035967 A JP2019035967 A JP 2019035967A JP 2018188108 A JP2018188108 A JP 2018188108A JP 2018188108 A JP2018188108 A JP 2018188108A JP 2019035967 A JP2019035967 A JP 2019035967A
- Authority
- JP
- Japan
- Prior art keywords
- conversion
- distance information
- image
- resolution
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
Description
C(k)=Σ|E(n)−F(n+k)| ・・・(1)
x=kj+D/SLOP ・・・(2) ,
C(x)=C(kj)−|D| ・・・(3) ,
D={C(kj-1)−C(kj+1) /2 ・・・(4) ,
SLOP=MAX{C(kj+1)−C(kj),C(kj−1)−C(kj)} ・・・(5)
DEF=KX・PY・x ・・・(6)
これらの階調変換部309が適用する階調変換特性の候補は、出力先や規格と、対応する階調変換特性がテーブルデータとして予めROM102に記憶されていてもよい。また、出力先であるPCやプリンタ、モバイル機器などに接続された状態で、出力先である外部装置その他接続状態にあるサーバから受信してもよい。規格を選択する場合、規格に応じて階調変換特性の候補を予めROM102に記憶されていてもよい。また、階調変換部309が適用する階調変換特性は、被写体検出や出力先あるいは規格の情報に応じて変換時にその都度生成されてもよい。どの出力先や規格に適合させるかの判定は、予めROM102に記憶されている複数の出力先の候補から選ぶ、あるいは前述したような外部装置と接続された状態で、外部装置やその他接続状態にあるサーバから、当該外部装置が対応する出力bit数や規格などの情報を取得する。
y1:合焦被写体の大きさ、y2:背景の大きさ
fw:撮影時の焦点距離
yw1、yw2:撮影時の像面上の大きさ
Sw1、Sw2:撮影時の被写体までの距離
fT:仮想視点での焦点距離
yT1、yT2:仮想視点で撮影した時の像面上の大きさ
ST1、ST2:仮想視点での被写体距離
t3:撮影時から仮想視点へのカメラ移動量
また、上述した実施の形態の処理は、各機能を具現化したソフトウェアのプログラムコードを記録した記憶媒体をシステム或いは装置に提供してもよい。そして、そのシステム或いは装置のコンピュータ(又はCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによって、前述した実施形態の機能を実現することができる。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フロッピィ(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスクなどを用いることができる。或いは、CD−ROM、CD−R、磁気テープ、不揮発性のメモリーカード、ROMなどを用いることもできる。
また、コンピュータが読み出したプログラムコードを実行することにより、前述した各実施の形態の機能が実現されるだけではない。そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)などが実際の処理の一部又は全部を行い、その処理によって前述した各実施例の機能が実現される場合も含まれている。
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリーに書きこまれてもよい。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含むものである。
上述した実施例は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
Claims (29)
- 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、合焦近傍の距離情報に、合焦近傍でない距離情報に比べてより多く階調が割り当てられた変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、合焦近傍の距離分解能が必要なアプリケーションが前記出力先である場合に、合焦近傍の距離情報に、合焦近傍でない距離情報に比べてより多く分解能が割り当てられた変換特性に決定することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、合焦被写体の距離情報を基準に前後の距離情報で非対称に階調が割り当てられる変換特性をさらに有することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、前記撮影光学系のレンズのF値に応じて分解能変換が異なる変換特性をさらに有することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、前記撮影光学系のレンズのF値に応じて、該F値が大きいほど、より大きい距離情報に割り当てる階調をより少なくする変換特性をさらに有することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、前記被写体像の撮像における基線長に応じて分解能変換が異なる変換特性をさらに有することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、前記被写体像の撮像におけるISO感度に応じて分解能変換が異なる変換特性をさらに有することを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段は複数の変換特性から選択的に変換特性を決定して前記分解能変換を行い、相対的に広い測距範囲が必要なアプリケーションが前記出力先である場合に、線形的な分解能変換を行う前記変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする請求項1に記載の画像処理装置。
- 前記距離情報は被写体距離の情報であり、
前記決定手段は、前記複数の画像の画像信号に基づいて得られるデフォーカス量から被写体距離の情報を前記距離情報として生成する生成手段を有し、
前記変換手段は、前記変換特性に従って前記被写体距離を変換することを特徴とする請求項1に記載の画像処理装置。 - 前記変換手段は、前記距離情報に対して二つ以上の変換特性をそれぞれ決定し、該変換特性のそれぞれに従って前記距離情報を変換し、当該変換によって得られた複数の結果を出力することを特徴とする請求項1に記載の画像処理装置。
- 前記複数の画像の画像信号は、ボケの異なる前記被写体像の複数の画像の画像信号、前記撮影光学系の瞳の異なる領域からの被写体像を撮像して得られた複数の画像の画像信号、又は被写体を複数の撮像手段で撮像して得られた複数の画像の画像信号であることを特徴とする請求項1に記載の画像処理装置。
- 前記距離情報は、前記複数の画像の一致度を表す値又は前記複数の画像のボケの評価値に基づいていることを特徴とする請求項1に記載の画像処理装置。
- 前記距離情報は、前記複数の画像の画像信号から算出される、画像内の被写体の被写体距離に対応する情報であることを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段によって前記変換特性を用いて変換された距離情報は、被写体距離マップとして出力されることを特徴とする請求項1に記載の画像処理装置。
- 前記距離情報は、前記複数の画像の画像信号から算出されるデフォーカス量を示す情報であることを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段によって前記変換特性を用いて変換された前記距離情報は、デフォーカスマップとして出力されることを特徴とする請求項1に記載の画像処理装置。
- 前記変換手段にて変換された距離情報を用いて画像処理を施す画像処理手段と、を有することを特徴とする請求項1に記載の画像処理装置。
- 前記画像処理は、前記変換手段にて変換された距離情報を用いて前記画像の各領域を距離情報に応じて変形する画像変形処理を含むことを特徴とする請求項17に記載の画像処理装置。
- 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、合焦被写体の距離情報を基準に前後の距離情報で非対称に階調が割り当てられる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、前記撮影光学系のレンズのF値に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、前記撮影光学系のレンズのF値に応じて、該F値が大きいほど、より大きい距離情報に割り当てる階調をより少なくする変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、前記被写体像の撮像における基線長に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得手段と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定手段と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換手段と、
を備え、
前記変換手段は、前記被写体像の撮像におけるISO感度に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理装置。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、合焦近傍の距離情報に、合焦近傍でない距離情報に比べてより多く階調が割り当てられた変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、合焦被写体の距離情報を基準に前後の距離情報で非対称に階調が割り当てられる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、前記撮影光学系のレンズのF値に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、前記撮影光学系のレンズのF値に応じて、該F値が大きいほど、より大きい距離情報に割り当てる階調をより少なくする変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、前記被写体像の撮像における基線長に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。 - 撮影光学系で形成された被写体像を撮像して得られた複数の画像の画像信号を取得する取得工程と、
前記複数の画像の画像信号を用いて、前記被写体像の距離情報を決定する決定工程と、
前記距離情報の分解能を変換する分解能変換を行って出力する変換工程と、
を備え、
前記変換工程は、前記被写体像の撮像におけるISO感度に応じて分解能変換が異なる変換特性を用いて、前記距離情報を分解能変換して出力することを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018188108A JP6626551B2 (ja) | 2018-10-03 | 2018-10-03 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018188108A JP6626551B2 (ja) | 2018-10-03 | 2018-10-03 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014167479A Division JP6415179B2 (ja) | 2014-08-20 | 2014-08-20 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019035967A true JP2019035967A (ja) | 2019-03-07 |
JP6626551B2 JP6626551B2 (ja) | 2019-12-25 |
Family
ID=65637558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018188108A Active JP6626551B2 (ja) | 2018-10-03 | 2018-10-03 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6626551B2 (ja) |
-
2018
- 2018-10-03 JP JP2018188108A patent/JP6626551B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP6626551B2 (ja) | 2019-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6415179B2 (ja) | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 | |
US10326927B2 (en) | Distance information producing apparatus, image capturing apparatus, distance information producing method and storage medium storing distance information producing program | |
JP6271990B2 (ja) | 画像処理装置、画像処理方法 | |
US9992478B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for synthesizing images | |
US11080873B2 (en) | Image processing apparatus, image capturing apparatus, image processing method, and storage medium | |
JP2013145982A (ja) | 撮像装置、画像処理装置及び方法 | |
US10368012B2 (en) | Image capture apparatus, image processing system, and control method thereof | |
JP6395429B2 (ja) | 画像処理装置、その制御方法及び記憶媒体 | |
JP6645711B2 (ja) | 画像処理装置、画像処理方法、プログラム | |
JP2018018425A (ja) | 画像処理装置及び画像処理方法 | |
JP6362070B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP6626551B2 (ja) | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 | |
JP6576114B2 (ja) | 撮像装置および撮像装置の制御方法 | |
JP7373297B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US10460430B2 (en) | Image processing apparatus and method for detecting and reducing an unnecessary light component in an image based on multiple viewpoints | |
JP6639155B2 (ja) | 画像処理装置及び画像処理方法 | |
JP7437915B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP2023069386A (ja) | 画像計測装置、方法およびプログラム | |
JP2018045101A (ja) | 焦点調節装置、焦点調節方法、プログラム | |
JP2018082239A (ja) | 画像処理装置、撮像装置および制御方法 | |
JP6827778B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2018200722A (ja) | 画像処理装置及びその制御方法、並びにプログラム及び記憶媒体 | |
JP2020086824A (ja) | 画像処理装置、画像処理方法、撮像装置およびプログラム | |
JP2018050231A (ja) | 撮像装置、撮像方法および撮像制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181003 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190619 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190930 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191129 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6626551 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |