JP6752942B2 - 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 - Google Patents
画像処理装置、画像処理方法およびプログラム、並びに撮像装置 Download PDFInfo
- Publication number
- JP6752942B2 JP6752942B2 JP2019113888A JP2019113888A JP6752942B2 JP 6752942 B2 JP6752942 B2 JP 6752942B2 JP 2019113888 A JP2019113888 A JP 2019113888A JP 2019113888 A JP2019113888 A JP 2019113888A JP 6752942 B2 JP6752942 B2 JP 6752942B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- divided
- image processing
- pixel
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
瞳分割像生成部104は分割画素A、分割画素B、分割画素C、分割画素Dで得られる信号(ライトフィールドデータと称す)をそれぞれ取得し、分割画素A群によって得られる信号から第1の像信号(瞳分割画像データ)を、分割画素B群によって得られる信号から第2の像信号を生成する。また、分割画素C群によって得られる信号から第3の像信号を、分割画素D群によって得られる信号から第4の像信号をそれぞれ生成する。
色変換部109は入力画像に対し、画素位置毎に足りない色情報を周囲の画素から補間し、各画素位置に対応する色情報Pix(R、G、B)を生成する。色変換部109はルックアップテーブルを用いて各画素位置に対応する色情報Pix(R、G、B)を、撮像装置100の撮影モードに従って予め決定される所定の変換目標色Pix(R’、G’、B’)へと変換する。ルックアップテーブルを用いた色変換処理は、ここでは詳細な説明は割愛するが、例えば特許文献1に開示されている技術を用いることで実現可能である。
ImgAB(x,y) =ImgA(x,y) +ImgB(x,y)・・・式1
なお、ここで示した式は一例にすぎず、構成される分割画素の個数や特性に応じて適宜式を変形させても良い。
視差量の取り得る値のそれぞれに対して後述の画像合成処理を行うことで所定の被写体にピントの合う画像を得ることができる。しかしながら、取り得る全ての視差量に対する画像合成処理を行うためには処理時間がかかり、現実的ではない。そこで合成パラメータ決定部703は、効率的に合成画像を生成するためのパラメータを視差マップ中の視差量の分布に基づいて決定する。
ParallaxMap = {50,50,50,10,10,50,50,20,20,20,100}
Param1 = {50,10,20,100}
例えば、視差量の絶対値が小さい順に並び替えを行い、優先度を決定する。
Param2 = {10,20,50,100}
Param3 = {10,20,50}
Param4 = {50,20,10,100}
Param5 = {50,20,10}
本実施例において画像合成部108は一対の瞳分割画像および合成パラメータ決定部703によって決定されるシフト量(仮想撮像面)に基づいて合成画像を生成する。なお、ここでは説明を簡便にするために分割画素Aおよび分割画素Bに着目して説明を行うものとする。以降の説明は分割画素Aおよび分割画素Bに示す位置関係と同一の関係性を有する分割画素の組み合わせにも適用可能である。
ImgAB(x,y) =ImgA(x,y) +ImgB(x+shift,y)・・・式2
ImgA(x,y)≒ ImgB(x+shift,y) ・・・式3
ImgAB(x,y) ≒ImgA(x,y) + ImgA(x,y) ・・・式4
ImgAB(x,y) ≒ImgB(x+shift,y) + ImgB(x+shift,y) ・・・式5
ImgB(x+shift,y) ≒ImgAB(x,y)/2 ・・・式6
ImgA(x,y) ≒ImgAB(x,y)/2 ・・・式7
ステップS607以降の処理は第1の実施例と同様であるためここでの説明を割愛する。
Claims (4)
- 各マイクロレンズに対して複数の分割画素が割り当てられている複数のマイクロレンズを有する撮像手段において、該複数の分割画素からそれぞれ出力された複数の分割画像データからなるライトフィールドデータを取得する取得手段と、
前記取得手段により取得されたライトフィールドデータに、特定の色を別の色に変換する色変換処理を含む所定の画像処理を行う画像処理手段と、
前記所定の画像処理が行われたライトフィールドデータをパラメータに基づいて処理することで、仮想撮像面におけるリフォーカス画像データを生成する生成手段と、
を有し、
前記分割画像データは、前記リフォーカス画像データよりも被写界深度が深いことを特徴とする画像処理装置。 - 前記色変換処理は、ルックアップテーブルに基づいて行われることを特徴とする請求項1に記載の画像処理装置。
- 前記生成手段は、ユーザーが指定した情報に基づいて前記パラメータを決定することを特徴とする請求項1または2に記載の画像処理装置。
- 各マイクロレンズに対して複数の分割画素が割り当てられている複数のマイクロレンズを有する撮像手段において、該複数の分割画素からそれぞれ出力された複数の分割画像データからなるライトフィールドデータを取得する取得ステップと、
前記取得ステップにより取得されたライトフィールドデータに、特定の色を別の色に変換する色変換処理を含む所定の画像処理を行う画像処理ステップと、
前記所定の画像処理が行われたライトフィールドデータをパラメータに基づいて処理することで、仮想撮像面におけるリフォーカス画像データを生成する生成ステップと
を有し、
前記分割画像データは、前記リフォーカス画像データよりも被写界深度が深いことを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019113888A JP6752942B2 (ja) | 2019-06-19 | 2019-06-19 | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019113888A JP6752942B2 (ja) | 2019-06-19 | 2019-06-19 | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014202274A Division JP6585890B2 (ja) | 2014-09-30 | 2014-09-30 | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019208214A JP2019208214A (ja) | 2019-12-05 |
JP6752942B2 true JP6752942B2 (ja) | 2020-09-09 |
Family
ID=68767861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019113888A Active JP6752942B2 (ja) | 2019-06-19 | 2019-06-19 | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6752942B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220067950A (ko) * | 2020-11-18 | 2022-05-25 | 삼성전자주식회사 | 디스플레이 장치 및 그의 제어 방법 |
-
2019
- 2019-06-19 JP JP2019113888A patent/JP6752942B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019208214A (ja) | 2019-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101691551B1 (ko) | 촬상장치 및 방법 | |
JP6055332B2 (ja) | 画像処理装置、撮像装置、制御方法、及びプログラム | |
JP5434361B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6555863B2 (ja) | 撮像装置及び撮像装置の制御方法 | |
JP4748230B2 (ja) | 撮像装置、撮像方法及び撮像プログラム | |
US20150062374A1 (en) | Imaging apparatus and method for controlling the imaging apparatus | |
JP6838994B2 (ja) | 撮像装置、撮像装置の制御方法およびプログラム | |
JP5947548B2 (ja) | 撮像装置、その制御方法、画像処理装置、画像生成方法、プログラム | |
JP2012049773A (ja) | 撮像装置および方法、並びにプログラム | |
JP5882789B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6095266B2 (ja) | 画像処理装置及びその制御方法 | |
JP2014153890A5 (ja) | ||
JP2013031154A (ja) | 画像処理装置、画像処理方法、撮像装置およびプログラム | |
JP6360338B2 (ja) | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 | |
US20130083169A1 (en) | Image capturing apparatus, image processing apparatus, image processing method and program | |
JP6211137B2 (ja) | 画像処理装置、撮像装置、及び画像処理方法 | |
JP2017060010A (ja) | 撮像装置、撮像装置の制御方法、およびプログラム | |
JP6752942B2 (ja) | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 | |
JP2009081636A (ja) | 画像記録装置及び撮影方法 | |
JP6585890B2 (ja) | 画像処理装置、画像処理方法およびプログラム、並びに撮像装置 | |
JP7134601B2 (ja) | 画像処理装置、画像処理方法、撮像装置及び撮像装置の制御方法 | |
JP2017184007A (ja) | 画像処理装置、撮像装置、制御方法およびプログラム | |
JP2020085967A (ja) | 画像処理装置およびその制御方法ならびにプログラム | |
JP2015084517A (ja) | 画像処理装置、画像処理方法、プログラム及び記録媒体 | |
JP5818515B2 (ja) | 画像処理装置、画像処理方法およびそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190719 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190719 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200309 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200312 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200508 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200708 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200721 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200819 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6752942 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |