JP2020086216A - 撮像制御装置、撮像装置及び撮像制御プログラム - Google Patents
撮像制御装置、撮像装置及び撮像制御プログラム Download PDFInfo
- Publication number
- JP2020086216A JP2020086216A JP2018222240A JP2018222240A JP2020086216A JP 2020086216 A JP2020086216 A JP 2020086216A JP 2018222240 A JP2018222240 A JP 2018222240A JP 2018222240 A JP2018222240 A JP 2018222240A JP 2020086216 A JP2020086216 A JP 2020086216A
- Authority
- JP
- Japan
- Prior art keywords
- blur amount
- amount data
- luminance signal
- depth
- expanded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 claims abstract description 44
- 238000004364 calculation method Methods 0.000 claims abstract description 27
- 238000006243 chemical reaction Methods 0.000 claims abstract description 10
- 238000012545 processing Methods 0.000 claims description 21
- 230000002093 peripheral effect Effects 0.000 claims description 5
- 230000001629 suppression Effects 0.000 abstract 1
- 230000003287 optical effect Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 238000012937 correction Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 238000009499 grossing Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Abstract
Description
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいて、エッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出するボケ量算出部と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張するボケ量データ拡張部と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ、及び前記第3拡張ボケ量データを比較する比較部と、
前記比較部において前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する制御方法決定部と、
を備えるものである。
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいてエッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出する処理と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張する処理と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ及び前記第3拡張ボケ量データを比較する処理と、
前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する処理と、
をコンピュータに実行させるものである。
本実施の形態では、このボケ量の算出方法について、「Shaojie Zhuo, Terence Sim; "Defocus map estimation from a single image", Pattern Recognition, Volume 44, Issue 9, September 2011, Pages 1852-1858(非特許文献1)」に記載の公知の方法を採用する。以下、非特許文献1に記載のボケ量の算出方法の要部について説明する。
図6は、図2に示すボケ量算出部152の内部の詳細な機能ブロック図である。図7は、図2に示すボケ量算出部152で行われるボケ量の算出の処理フロー図である。
110 光学系
111 ズームレンズ
111 レンズ
112 フォーカスレンズ
113 補正レンズ
130 撮像素子
131 バスライン
133 メモリ
134 画像処理部
135 表示処理部
136 モニタ
137 出力処理部
140 操作部材
150 制御部
151 変換部
152 ボケ量算出部
153 ボケ量データ拡張部
154 比較部
156 制御方法決定部
161 補正レンズ駆動部
162 フォーカス駆動部
163 ズーム駆動部
201 記録媒体
1521 平滑化部
1522 垂直方向グラディエント算出部
1523 グラディエント絶対値算出部
1524 グラディエント絶対値比算出部
1525 ボケ量算出部
1526 外れ値除去平滑化部
Claims (6)
- 第1深度で取得された第1画像信号、前記第1深度より深い第2深度で取得された第2画像信号、及び前記第1深度より浅い第3深度で取得された第3画像信号をそれぞれ、第1輝度信号、第2輝度信号及び第3輝度信号に変換する変換部と、
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいて、エッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出するボケ量算出部と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張するボケ量データ拡張部と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ、及び前記第3拡張ボケ量データを比較する比較部と、
前記比較部において前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する制御方法決定部と、
を備える、撮像制御装置。 - 前記制御方法決定部は、前記バックフォーカス領域及び前記フロントフォーカス領域以外の領域については、コントラスト方式でフォーカスを制御する、請求項1に記載の撮像制御装置。
- 前記制御方法決定部は、前記バックフォーカス領域については深度を負方向に調整し、前記フロントフォーカス領域については深度を正方向に調整する、請求項1に記載の撮像制御装置。
- 前記ボケ量算出部は、前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号についてのグラディエントと、前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号をローパスフィルタで平滑した後の輝度信号のグラディエントとに基づいて、エッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出する、請求項1に記載の撮像制御装置。
- 撮像部を更に備え、
請求項1から4のいずれか一項に記載の撮像制御装置と、
を備える撮像装置。 - 第1深度で取得された第1画像信号、前記第1深度より深い第2深度で取得された第2画像信号、及び前記第1深度より浅い第3深度で取得された第3画像信号をそれぞれ、第1輝度信号、第2輝度信号及び第3輝度信号に変換する処理と、
前記第1輝度信号、前記第2輝度信号及び前記第3輝度信号に基づいてエッジに関する第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ算出する処理と、
前記算出された第1ボケ量、第2ボケ量及び第3ボケ量をそれぞれ、エッジ周辺画素に関する第1拡張ボケ量データ、第2拡張ボケ量データ及び第3拡張ボケ量データに拡張する処理と、
前記第1拡張ボケ量データ、前記第2拡張ボケ量データ及び前記第3拡張ボケ量データを比較する処理と、
前記第1拡張ボケ量データが前記第2拡張ボケ量データより大きいと判定された領域をバックフォーカス領域と設定し、前記第1拡張ボケ量データが前記第3拡張ボケ量データより大きいと判定された領域をフロントフォーカス領域と設定することでフォーカスを制御する処理と、
をコンピュータに実行させる撮像制御プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222240A JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
US16/698,541 US11115582B2 (en) | 2018-11-28 | 2019-11-27 | Imaging control apparatus, imaging apparatus, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018222240A JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020086216A true JP2020086216A (ja) | 2020-06-04 |
JP7107191B2 JP7107191B2 (ja) | 2022-07-27 |
Family
ID=70907828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018222240A Active JP7107191B2 (ja) | 2018-11-28 | 2018-11-28 | 撮像制御装置、撮像装置及び撮像制御プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7107191B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020096249A (ja) * | 2018-12-11 | 2020-06-18 | 株式会社Jvcケンウッド | 撮像制御装置、撮像装置及び撮像制御プログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1152221A (ja) * | 1997-07-31 | 1999-02-26 | Olympus Optical Co Ltd | 顕微鏡用焦点検出装置および顕微鏡用焦点検出方法 |
JP2014160186A (ja) * | 2013-02-20 | 2014-09-04 | Nikon Corp | 焦点検出装置及び撮像装置 |
US20150381876A1 (en) * | 2014-06-27 | 2015-12-31 | Sony Corporation | Image processing system with blur measurement and method of operation thereof |
JP2016051085A (ja) * | 2014-08-29 | 2016-04-11 | 株式会社ニコン | 撮像装置 |
JP2016111609A (ja) * | 2014-12-09 | 2016-06-20 | 株式会社東芝 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP2017138199A (ja) * | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 画像処理装置、撮像装置、および画像処理方法 |
-
2018
- 2018-11-28 JP JP2018222240A patent/JP7107191B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1152221A (ja) * | 1997-07-31 | 1999-02-26 | Olympus Optical Co Ltd | 顕微鏡用焦点検出装置および顕微鏡用焦点検出方法 |
JP2014160186A (ja) * | 2013-02-20 | 2014-09-04 | Nikon Corp | 焦点検出装置及び撮像装置 |
US20150381876A1 (en) * | 2014-06-27 | 2015-12-31 | Sony Corporation | Image processing system with blur measurement and method of operation thereof |
JP2016051085A (ja) * | 2014-08-29 | 2016-04-11 | 株式会社ニコン | 撮像装置 |
JP2016111609A (ja) * | 2014-12-09 | 2016-06-20 | 株式会社東芝 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP2017138199A (ja) * | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 画像処理装置、撮像装置、および画像処理方法 |
Non-Patent Citations (1)
Title |
---|
SHAOJIE ZHUO, TERENCE SIM: "Defocus map estimation from a single image", PATTERN RECOGNITION, vol. Volume 44, Issue 9, JPN6021048705, 21 March 2011 (2011-03-21), pages 1852 - 1858, ISSN: 0004656314 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020096249A (ja) * | 2018-12-11 | 2020-06-18 | 株式会社Jvcケンウッド | 撮像制御装置、撮像装置及び撮像制御プログラム |
JP7020387B2 (ja) | 2018-12-11 | 2022-02-16 | 株式会社Jvcケンウッド | 撮像制御装置、撮像装置及び撮像制御プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7107191B2 (ja) | 2022-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9607240B2 (en) | Image processing apparatus, image capturing apparatus, image processing method, image capturing method, and non-transitory computer-readable medium for focus bracketing | |
US9313419B2 (en) | Image processing apparatus and image pickup apparatus where image processing is applied using an acquired depth map | |
JP5980294B2 (ja) | データ処理装置、撮像装置、およびデータ処理方法 | |
US9992478B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for synthesizing images | |
US9489747B2 (en) | Image processing apparatus for performing object recognition focusing on object motion, and image processing method therefor | |
US9697589B2 (en) | Signal processing apparatus, imaging apparatus, signal processing method and program for correcting deviation of blurring in images | |
JP5374119B2 (ja) | 距離情報取得装置、撮像装置、及びプログラム | |
US20180182075A1 (en) | Image processing apparatus, image capturing apparatus, method of image processing, and storage medium | |
US9619886B2 (en) | Image processing apparatus, imaging apparatus, image processing method and program | |
JP2009111716A (ja) | 撮像装置、プログラムおよびテンプレート生成方法 | |
JP6564284B2 (ja) | 画像処理装置および画像処理方法 | |
KR20170101532A (ko) | 이미지 융합 방법 및 이를 위한 컴퓨터 프로그램, 그 기록매체 | |
US10122939B2 (en) | Image processing device for processing image data and map data with regard to depth distribution of a subject, image processing system, imaging apparatus, image processing method, and recording medium | |
JP2015207090A (ja) | 画像処理装置、及びその制御方法 | |
JP7107191B2 (ja) | 撮像制御装置、撮像装置及び撮像制御プログラム | |
US9270883B2 (en) | Image processing apparatus, image pickup apparatus, image pickup system, image processing method, and non-transitory computer-readable storage medium | |
US9710897B2 (en) | Image processing apparatus, image processing method, and recording medium | |
JP6436840B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
US20200311893A1 (en) | Image processing apparatus with images having different in-focus positions, image pickup apparatus, image processing method, and computer readable storage medium | |
JP7020387B2 (ja) | 撮像制御装置、撮像装置及び撮像制御プログラム | |
JP2011154194A (ja) | 撮像装置 | |
JP6556033B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US11115582B2 (en) | Imaging control apparatus, imaging apparatus, and recording medium | |
JP6381212B2 (ja) | 撮像装置及びその制御方法 | |
JP2017182668A (ja) | データ処理装置、撮像装置、及びデータ処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211015 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220614 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220627 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7107191 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |