JP6555881B2 - 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 - Google Patents
画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 Download PDFInfo
- Publication number
- JP6555881B2 JP6555881B2 JP2014257080A JP2014257080A JP6555881B2 JP 6555881 B2 JP6555881 B2 JP 6555881B2 JP 2014257080 A JP2014257080 A JP 2014257080A JP 2014257080 A JP2014257080 A JP 2014257080A JP 6555881 B2 JP6555881 B2 JP 6555881B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- intensity distribution
- point
- image processing
- point image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 108
- 238000003384 imaging method Methods 0.000 title claims description 66
- 238000003672 processing method Methods 0.000 title claims description 22
- 230000003287 optical effect Effects 0.000 claims description 147
- 238000009826 distribution Methods 0.000 claims description 74
- 238000012546 transfer Methods 0.000 claims description 62
- 238000000034 method Methods 0.000 claims description 31
- 238000011084 recovery Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 18
- 238000012937 correction Methods 0.000 claims description 8
- 230000006870 function Effects 0.000 description 71
- 229920013655 poly(bisphenol-A sulfone) Polymers 0.000 description 51
- 238000004364 calculation method Methods 0.000 description 10
- 239000011295 pitch Substances 0.000 description 10
- 230000015556 catabolic process Effects 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000006731 degradation reaction Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 230000006866 deterioration Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000004075 alteration Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000003252 repetitive effect Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 238000005094 computer simulation Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005315 distribution function Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012804 iterative process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G06T5/73—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
Description
ここで、Lucy−Richardson法(LR法)による画像回復処理は、実空間において以下の式(2)のように表される。
W(m,n+1)=(A−a)*b/(A*B)
W(m+1,n)=a*(B−b)/(A*B)
W(m+1,n+1)=a*b/(A*B)
ここで、a=mod(i,A)、b=mod(j,B)である。また、mod(x,y)はxのyによる剰余である。以上より、以下の式(6)が得られる。
507 繰り返し回数設定部(回数設定手段)
508 画像回復部(画像回復手段)
Claims (14)
- 画像を取得する画像取得手段と、
前記画像の撮影条件情報を取得する条件取得手段と、
光学系に関する点像強度分布を取得するPSF取得手段と、
前記画像中の複数の領域のそれぞれに対応する前記点像強度分布に基づいて、該複数の領域のそれぞれに対する繰り返し回数を設定する回数設定手段と、
前記複数の領域のそれぞれに対して、前記点像強度分布を用いて前記繰り返し回数だけ繰り返し処理を行うことにより、前記画像の回復処理を行う画像回復手段を有し、
前記PSF取得手段は、前記撮影条件情報に基づいて前記点像強度分布を取得することを特徴とする画像処理装置。 - 前記PSF取得手段は、撮像素子の画素位置に応じて異なる前記点像強度分布を取得することを特徴とする請求項1に記載の画像処理装置。
- 前記PSF取得手段は、撮像素子の画素位置に基づいて、前記画像を前記複数の領域に分割することを特徴とする請求項1または2に記載の画像処理装置。
- 前記画像回復手段は、
前記PSF取得手段により取得された複数の点像強度分布の中から、撮像素子の着目画素に対応する複数の点像強度分布を特定し、
前記着目画素ごとに前記画像の回復処理を行うことを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。 - 前記画像回復手段は、
前記着目画素に対応する前記複数の点像強度分布に適用する重み情報を決定し、
前記重み情報に基づいて、前記着目画素ごとに前記画像の回復処理を行うことを特徴とする請求項4に記載の画像処理装置。 - 前記光学系に関する光学伝達関数を取得する関数取得手段と、
撮像素子に関する情報に基づいて前記光学伝達関数を修正する関数修正手段を更に有し、
前記PSF取得手段は、前記関数修正手段で修正された前記光学伝達関数から前記点像強度分布を生成することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。 - 前記回数設定手段は、前記点像強度分布の最大値に基づいて前記繰り返し回数を設定することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 前記回数設定手段は、前記点像強度分布の前記最大値が大きいほど前記繰り返し回数を少なくすることを特徴とする請求項7に記載の画像処理装置。
- 前記回数設定手段は、前記複数の領域のそれぞれに複数の点像強度分布を対応付け、該複数の点像強度分布に基づいて該複数の領域のそれぞれに対する前記繰り返し回数を設定することを特徴とする請求項1乃至8のいずれか1項に記載の画像処理装置。
- 前記画像回復手段は、
前記画像および前記点像強度分布を用いて第1の更新画像を生成し、
前記画像、第Nの更新画像、および、前記点像強度分布を用いて第(N+1)の更新画像を生成する処理(Nは自然数)を繰り返し実行すること特徴とする請求項1乃至9のいずれか1項に記載の画像処理装置。 - 光学系を介して形成された光学像を光電変換して画像信号を出力する撮像素子と、
前記画像信号から生成された画像を取得する画像取得手段と、
前記画像の撮影条件情報を取得する条件取得手段と、
光学系に関する点像強度分布を取得するPSF取得手段と、
前記画像中の複数の領域のそれぞれに対応する前記点像強度分布に基づいて、該複数の領域のそれぞれに対する繰り返し回数を設定する回数設定手段と、
前記複数の領域のそれぞれに対して、前記点像強度分布を用いて前記繰り返し回数だけ繰り返し処理を行うことにより、前記画像の回復処理を行う画像回復手段を有し、
前記PSF取得手段は、前記撮影条件情報に基づいて前記点像強度分布を取得することを特徴とする撮像装置。 - 画像処理装置で実行される画像処理方法であって、
画像を取得するステップと、
前記画像の撮影条件情報を取得するステップと、
光学系に関する点像強度分布を取得するステップと、
前記画像中の複数の領域のそれぞれに対応する前記点像強度分布に基づいて、該複数の領域のそれぞれに対する繰り返し回数を設定するステップと、
前記複数の領域のそれぞれに対して、前記点像強度分布を用いて前記繰り返し回数だけ繰り返し処理を行うことにより、前記画像の回復処理を行うステップを有し、
前記点像強度分布を取得するステップは、前記撮影条件情報に基づいて前記点像強度分布を取得することを特徴とする画像処理方法。 - 画像を取得するステップと、
前記画像の撮影条件情報を取得するステップと、
光学系に関する点像強度分布を取得するステップと、
前記画像中の複数の領域のそれぞれに対応する前記点像強度分布に基づいて、該複数の領域のそれぞれに対する繰り返し回数を設定するステップと、
前記複数の領域のそれぞれに対して、前記点像強度分布を用いて前記繰り返し回数だけ繰り返し処理を行うことにより、前記画像の回復処理を行うステップをコンピュータに実行させるように構成されており、
前記点像強度分布を取得するステップは、前記撮影条件情報に基づいて前記点像強度分布を取得することを特徴とする画像処理プログラム。 - 請求項13に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014257080A JP6555881B2 (ja) | 2014-12-19 | 2014-12-19 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
PCT/JP2015/005773 WO2016098282A1 (en) | 2014-12-19 | 2015-11-18 | Image processing apparatus, image pickup apparatus, image processing method, image processing program, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014257080A JP6555881B2 (ja) | 2014-12-19 | 2014-12-19 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016118856A JP2016118856A (ja) | 2016-06-30 |
JP2016118856A5 JP2016118856A5 (ja) | 2017-11-30 |
JP6555881B2 true JP6555881B2 (ja) | 2019-08-07 |
Family
ID=56126196
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014257080A Expired - Fee Related JP6555881B2 (ja) | 2014-12-19 | 2014-12-19 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6555881B2 (ja) |
WO (1) | WO2016098282A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017158764A (ja) | 2016-03-09 | 2017-09-14 | ソニー株式会社 | 画像処理装置、画像処理方法、及び記録媒体 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002288653A (ja) * | 2001-03-23 | 2002-10-04 | Minolta Co Ltd | 画像処理装置,方法,プログラム及び記録媒体 |
US20070009169A1 (en) * | 2005-07-08 | 2007-01-11 | Bhattacharjya Anoop K | Constrained image deblurring for imaging devices with motion sensing |
JP2007193508A (ja) * | 2006-01-18 | 2007-08-02 | Sanyo Electric Co Ltd | 画像処理装置及び画像処理プログラム |
JP4927005B2 (ja) * | 2008-03-04 | 2012-05-09 | 日東光学株式会社 | 変化要因情報のデータの生成法および信号処理装置 |
JP2009267523A (ja) * | 2008-04-22 | 2009-11-12 | Nikon Corp | 画像復元装置及び撮像装置 |
JP2010087857A (ja) * | 2008-09-30 | 2010-04-15 | Fujifilm Corp | 撮像装置、撮像方法、およびプログラム |
JP5615393B2 (ja) * | 2013-01-28 | 2014-10-29 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
-
2014
- 2014-12-19 JP JP2014257080A patent/JP6555881B2/ja not_active Expired - Fee Related
-
2015
- 2015-11-18 WO PCT/JP2015/005773 patent/WO2016098282A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2016098282A1 (en) | 2016-06-23 |
JP2016118856A (ja) | 2016-06-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5909540B2 (ja) | 画像処理表示装置 | |
JP5222472B2 (ja) | 画像処理装置、画像復元方法およびプログラム | |
EP2574038B1 (en) | Image capturing apparatus, image processing apparatus, image processing method, and image processing program | |
JP5615393B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP5361976B2 (ja) | 画像処理プログラム、画像処理方法、画像処理装置及び撮像装置 | |
US9225898B2 (en) | Image pickup apparatus, image processing system, image pickup system, image processing method, and non-transitory computer-readable storage medium | |
JP5765893B2 (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP2012003454A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP5541750B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及び、プログラム | |
JP6555881B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
US9727956B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium | |
US10339637B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for correcting deterioration of image | |
JP6648918B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP6333076B2 (ja) | 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体 | |
JP2017123532A (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラムおよび記録媒体 | |
JP5344647B2 (ja) | 画像処理方法、画像処理装置および画像処理プログラム | |
JP6566780B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP2015119428A (ja) | 画像処理方法、画像処理装置、撮像装置、画像処理プログラム、および、記憶媒体 | |
JP2017027463A (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP6818461B2 (ja) | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム | |
JP6468791B2 (ja) | 画像処理装置、撮像装置、画像処理システム、画像処理方法および画像処理プログラム | |
JP2017173920A (ja) | 画像処理装置、画像処理方法、画像処理プログラム、および記録媒体 | |
JP2016005246A (ja) | 画像処理装置、画像表示装置、画像処理方法、プログラム、記憶媒体 | |
JP2016163313A (ja) | 画像処理装置及び画像処理方法 | |
JP2015138470A (ja) | 画像処理装置、撮像装置、画像処理装置の制御方法、及び、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171018 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171018 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181120 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190611 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190709 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6555881 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |