JP7107191B2 - 撮像制御装置、撮像装置及び撮像制御プログラム - Google Patents
撮像制御装置、撮像装置及び撮像制御プログラム Download PDFInfo
- Publication number
- JP7107191B2 JP7107191B2 JP2018222240A JP2018222240A JP7107191B2 JP 7107191 B2 JP7107191 B2 JP 7107191B2 JP 2018222240 A JP2018222240 A JP 2018222240A JP 2018222240 A JP2018222240 A JP 2018222240A JP 7107191 B2 JP7107191 B2 JP 7107191B2
- Authority
- JP
- Japan
- Prior art keywords
- luminance signal
- extended
- bokeh amount
- amount data
- bokeh
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
Description
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいて、エッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出するボケ量算出部と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張するボケ量データ拡張部と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ、及び前記第3拡張ボケ量データを比較する比較部と、
前記比較部において前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する制御方法決定部と、
を備えるものである。
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいてエッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出する処理と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張する処理と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ及び前記第3拡張ボケ量データを比較する処理と、
前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する処理と、
をコンピュータに実行させるものである。
本実施の形態では、このボケ量の算出方法について、「Shaojie Zhuo, Terence Sim; "Defocus map estimation from a single image", Pattern Recognition, Volume 44, Issue 9, September 2011, Pages 1852-1858(非特許文献1)」に記載の公知の方法を採用する。以下、非特許文献1に記載のボケ量の算出方法の要部について説明する。
図6は、図2に示すボケ量算出部152の内部の詳細な機能ブロック図である。図7は、図2に示すボケ量算出部152で行われるボケ量の算出の処理フロー図である。
110 光学系
111 ズームレンズ
111 レンズ
112 フォーカスレンズ
113 補正レンズ
130 撮像素子
131 バスライン
133 メモリ
134 画像処理部
135 表示処理部
136 モニタ
137 出力処理部
140 操作部材
150 制御部
151 変換部
152 ボケ量算出部
153 ボケ量データ拡張部
154 比較部
156 制御方法決定部
161 補正レンズ駆動部
162 フォーカス駆動部
163 ズーム駆動部
201 記録媒体
1521 平滑化部
1522 垂直方向グラディエント算出部
1523 グラディエント絶対値算出部
1524 グラディエント絶対値比算出部
1525 ボケ量算出部
1526 外れ値除去平滑化部
Claims (6)
- 第1深度で取得された第1画像信号、前記第1深度より深い第2深度で取得された第2画像信号、及び前記第1深度より浅い第3深度で取得された第3画像信号をそれぞれ、第1輝度信号、第2輝度信号及び第3輝度信号に変換する変換部と、
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号についてのグラディエントと、前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号をローパスフィルタで平滑した後の輝度信号のグラディエントとに基づいて、エッジの輝度信号に関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出するボケ量算出部と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素の輝度信号に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張するボケ量データ拡張部と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ、及び前記第3拡張ボケ量データを比較する比較部と、
前記比較部において前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する制御方法決定部と、
を備える、撮像制御装置。 - 前記制御方法決定部は、前記バックフォーカス領域及び前記フロントフォーカス領域以外の領域については、コントラスト方式でフォーカスを制御する、請求項1に記載の撮像制御装置。
- 前記制御方法決定部は、前記バックフォーカス領域については深度を負方向に調整し、前記フロントフォーカス領域については深度を正方向に調整する、請求項1に記載の撮像制御装置。
- 前記変換部は、撮像素子に対するズームレンズの光軸方向の位置を第1の位置として取得された第1画像信号、前記ズームレンズの光軸方向の位置を前記第1の位置よりも前記撮像素子から離れた第2の位置として取得された第2画像信号、及び前記ズームレンズの光軸方向の位置を前記第1の位置よりも前記撮像素子に近い第3の位置として取得された第3画像信号をそれぞれ、第1輝度信号、第2輝度信号及び第3輝度信号に変換し、
前記変換部がRGB信号の前記第1画像信号、前記第2画像信号、及び前記第3画像信号をY変換することで、前記第1輝度信号、前記第2輝度信号、及び前記第3輝度信号に変換する請求項1~3のいずれか1項に記載の撮像制御装置。 - 撮像部を更に備え、
請求項1から4のいずれか一項に記載の撮像制御装置と、
を備える撮像装置。 - 第1深度で取得された第1画像信号、前記第1深度より深い第2深度で取得された第2画像信号、及び前記第1深度より浅い第3深度で取得された第3画像信号をそれぞれ、第1輝度信号、第2輝度信号及び第3輝度信号に変換する処理と、
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号についてのグラディエントと、前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号をローパスフィルタで平滑した後の輝度信号のグラディエントとに基づいて、エッジの輝度信号に関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出する処理と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素の輝度信号に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張する処理と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ及び前記第3拡張ボケ量データを比較する処理と、
前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する処理と、
をコンピュータに実行させる撮像制御プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222240A JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
US16/698,541 US11115582B2 (en) | 2018-11-28 | 2019-11-27 | Imaging control apparatus, imaging apparatus, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222240A JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020086216A JP2020086216A (ja) | 2020-06-04 |
JP7107191B2 true JP7107191B2 (ja) | 2022-07-27 |
Family
ID=70907828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018222240A Active JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7107191B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7020387B2 (ja) * | 2018-12-11 | 2022-02-16 | 株式会社Jvcケンウッド | 撮像制御装置、撮像装置及び撮像制御プログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014160186A (ja) | 2013-02-20 | 2014-09-04 | Nikon Corp | 焦点検出装置及び撮像装置 |
US20150381876A1 (en) | 2014-06-27 | 2015-12-31 | Sony Corporation | Image processing system with blur measurement and method of operation thereof |
JP2016051085A (ja) | 2014-08-29 | 2016-04-11 | 株式会社ニコン | 撮像装置 |
JP2016111609A (ja) | 2014-12-09 | 2016-06-20 | 株式会社東芝 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP2017138199A (ja) | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 画像処理装置、撮像装置、および画像処理方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4007643B2 (ja) * | 1997-07-31 | 2007-11-14 | オリンパス株式会社 | 顕微鏡用焦点検出装置および顕微鏡用焦点検出方法 |
-
2018
- 2018-11-28 JP JP2018222240A patent/JP7107191B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014160186A (ja) | 2013-02-20 | 2014-09-04 | Nikon Corp | 焦点検出装置及び撮像装置 |
US20150381876A1 (en) | 2014-06-27 | 2015-12-31 | Sony Corporation | Image processing system with blur measurement and method of operation thereof |
JP2016051085A (ja) | 2014-08-29 | 2016-04-11 | 株式会社ニコン | 撮像装置 |
JP2016111609A (ja) | 2014-12-09 | 2016-06-20 | 株式会社東芝 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP2017138199A (ja) | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 画像処理装置、撮像装置、および画像処理方法 |
Non-Patent Citations (1)
Title |
---|
Shaojie Zhuo, Terence Sim,Defocus map estimation from a single image,Pattern Recognition,ELSEVIER,2011年03月21日,Volume 44, Issue 9,1852-1858 |
Also Published As
Publication number | Publication date |
---|---|
JP2020086216A (ja) | 2020-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9438792B2 (en) | Image-processing apparatus and image-processing method for generating a virtual angle of view | |
US9992478B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for synthesizing images | |
US9607240B2 (en) | Image processing apparatus, image capturing apparatus, image processing method, image capturing method, and non-transitory computer-readable medium for focus bracketing | |
JP5720275B2 (ja) | 撮像装置および撮像方法 | |
JP7036176B2 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
US20180182075A1 (en) | Image processing apparatus, image capturing apparatus, method of image processing, and storage medium | |
JP6447840B2 (ja) | 画像装置、及び画像装置における自動的な焦点合わせのための方法、並びに対応するコンピュータプログラム | |
JP6711396B2 (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
US8866942B2 (en) | Auto focus adjusting device and method and recording medium of the same method | |
US9262833B2 (en) | Methodology for performing depth estimation with defocused images under extreme lighting conditions | |
JP7107191B2 (ja) | 撮像制御装置、撮像装置及び撮像制御プログラム | |
US10326951B2 (en) | Image processing apparatus, image processing method, image capturing apparatus and image processing program | |
US11115582B2 (en) | Imaging control apparatus, imaging apparatus, and recording medium | |
US9710897B2 (en) | Image processing apparatus, image processing method, and recording medium | |
US11653107B2 (en) | Image pick up apparatus, image pick up method, and storage medium | |
US20200311893A1 (en) | Image processing apparatus with images having different in-focus positions, image pickup apparatus, image processing method, and computer readable storage medium | |
JP2010134309A (ja) | オートフォーカス装置、オートフォーカス方法及び撮像装置 | |
JP7020387B2 (ja) | 撮像制御装置、撮像装置及び撮像制御プログラム | |
JP6436840B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP2017229025A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6556033B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6645690B2 (ja) | 自動焦点調節装置、撮像装置、および自動焦点調節方法 | |
US11206350B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and storage medium | |
JP2017182668A (ja) | データ処理装置、撮像装置、及びデータ処理方法 | |
JP2011253099A (ja) | 焦点検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211015 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220614 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220627 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7107191 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |