JP2017010095A5 - - Google Patents

Download PDF

Info

Publication number
JP2017010095A5
JP2017010095A5 JP2015121680A JP2015121680A JP2017010095A5 JP 2017010095 A5 JP2017010095 A5 JP 2017010095A5 JP 2015121680 A JP2015121680 A JP 2015121680A JP 2015121680 A JP2015121680 A JP 2015121680A JP 2017010095 A5 JP2017010095 A5 JP 2017010095A5
Authority
JP
Japan
Prior art keywords
blur
estimation
image
area
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015121680A
Other languages
English (en)
Other versions
JP2017010095A (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2015121680A priority Critical patent/JP2017010095A/ja
Priority claimed from JP2015121680A external-priority patent/JP2017010095A/ja
Priority to US15/177,494 priority patent/US20160371567A1/en
Publication of JP2017010095A publication Critical patent/JP2017010095A/ja
Publication of JP2017010095A5 publication Critical patent/JP2017010095A5/ja
Pending legal-status Critical Current

Links

Description

本発明の一側面としての画像処理装置は、ぼけ画像から推定するぼけの種類を決定する決定手段と、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段とを有し、前記生成手段は、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する。
本発明の他の側面としての画像処理装置は、ぼけ画像から推定するぼけの種類を決定する決定手段と、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段とを有し、前記生成手段は、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記推定ぼけに対するデノイジング処理を行い、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する。
本発明の他の側面としての撮像装置は、光学系を介して形成された光学像を光電変換して画像信号を出力する撮像素子と、前記画像信号に基づいて生成されたぼけ画像から、推定するぼけの種類を決定する決定手段と、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段とを有し、前記生成手段は、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する。
本発明の他の側面としての撮像装置は、光学系を介して形成された光学像を光電変換して画像信号を出力する撮像素子と、前記画像信号に基づいて生成されたぼけ画像から、推定するぼけの種類を決定する決定手段と、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段とを有し、前記生成手段は、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記推定ぼけに対するデノイジング処理を行い、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する。
本発明の他の側面としての画像処理方法は、ぼけ画像から推定するぼけの種類を決定するステップと、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップとを有し、前記推定ぼけを生成するステップにおいて、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する。
本発明の他の側面としての画像処理方法は、ぼけ画像から推定するぼけの種類を決定するステップと、前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップとを有し、前記推定ぼけを生成するステップにおいて、ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、前記推定ぼけに対するデノイジング処理を行い、前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する。

Claims (17)

  1. ぼけ画像から推定するぼけの種類を決定する決定手段と、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段と、を有し、
    前記生成手段は、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理装置。
  2. ぼけ画像から推定するぼけの種類を決定する決定手段と、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段と、を有し、
    前記生成手段は、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記推定ぼけに対するデノイジング処理を行い、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理装置。
  3. 前記信号に関する情報は、前記ぼけ推定領域における輝度分布または該輝度分布の微分値に関する情報であることを特徴とする請求項1または2に記載の画像処理装置。
  4. 前記決定手段は、前記ぼけ画像の周波数特性または該ぼけ画像を撮影した際の撮影条件に基づいて、前記ぼけの種類を決定することを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。
  5. 前記決定手段は、前記ぼけ画像を用いて、前記ぼけの種類を自動的に決定するか、または、ユーザが該ぼけの種類を手動で決定する際のアシストを行うことを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。
  6. 前記ぼけの種類は、光学系の収差、回折、デフォーカス、ぶれ、および、擾乱の少なくとも一つを含むことを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
  7. 前記生成手段は、前記ぼけの推定処理を行う際に、該ぼけの種類を反映した制限を加えることを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
  8. 前記生成手段は、
    前記ぼけ推定領域の解像度を低下させ、該解像度が低下したぼけ推定領域に対して、前記推定処理と前記補正処理とを行い、
    前記推定処理と前記補正処理とを繰り返しながら、前記ぼけ推定領域の解像度を低下させる度合いを小さくしていく、ことを特徴とする請求項1乃至7のいずれか1項に記載の画像処理装置。
  9. 前記生成手段は、
    前記ぼけ推定領域に含まれるノイズ量を取得し、
    前記ぼけ推定領域を周波数分解して周波数分解ぼけ推定領域を生成し、
    前記ノイズ量に基づいて、前記周波数分解ぼけ推定領域に対するデノイジングを行い、該デノイジングを行った後の周波数分解ぼけ推定領域を再合成する、ことを特徴とする請求項1乃至8のいずれか1項に記載の画像処理装置。
  10. 前記推定ぼけを用いて前記ぼけ画像の少なくとも一部を補正する補正手段を更に有することを特徴とする請求項1乃至9のいずれか1項に記載の画像処理装置。
  11. 光学系を介して形成された光学像を光電変換して画像信号を出力する撮像素子と、
    前記画像信号に基づいて生成されたぼけ画像から、推定するぼけの種類を決定する決定手段と、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段と、を有し、
    前記生成手段は、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする撮像装置。
  12. 光学系を介して形成された光学像を光電変換して画像信号を出力する撮像素子と、
    前記画像信号に基づいて生成されたぼけ画像から、推定するぼけの種類を決定する決定手段と、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成する生成手段と、を有し、
    前記生成手段は、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記推定ぼけに対するデノイジング処理を行い、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする撮像装置。
  13. ぼけ画像から推定するぼけの種類を決定するステップと、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップと、を有し、
    前記推定ぼけを生成するステップにおいて、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理方法。
  14. ぼけ画像から推定するぼけの種類を決定するステップと、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップと、を有し、
    前記推定ぼけを生成するステップにおいて、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記推定ぼけに対するデノイジング処理を行い、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理方法。
  15. ぼけ画像から推定するぼけの種類を決定するステップと、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップと、をコンピュータに実行させるように構成された画像処理プログラムであって、
    前記推定ぼけを生成するステップにおいて、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理もしくは前記推定処理、または、該取得処理もしくは該推定処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理プログラム。
  16. ぼけ画像から推定するぼけの種類を決定するステップと、
    前記ぼけ画像における少なくとも一部のぼけ推定領域を取得し、該ぼけ推定領域から推定ぼけを生成するステップと、をコンピュータに実行させるように構成された画像処理プログラムであって、
    前記推定ぼけを生成するステップにおいて、
    ぼけの推定処理と、該ぼけを用いた前記ぼけ推定領域における信号に関する情報の補正処理と、を繰り返して前記推定ぼけを生成し、
    前記推定ぼけに対するデノイジング処理を行い、
    前記ぼけの種類に応じて、前記ぼけ推定領域の取得処理、前記推定処理、もしくは、前記デノイジング処理、または、該取得処理、該推定処理、もしくは、該デノイジング処理に用いられるパラメータの少なくとも一つを変更する、ことを特徴とする画像処理プログラム。
  17. 請求項15または16に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。
JP2015121680A 2015-06-17 2015-06-17 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 Pending JP2017010095A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2015121680A JP2017010095A (ja) 2015-06-17 2015-06-17 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体
US15/177,494 US20160371567A1 (en) 2015-06-17 2016-06-09 Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for estimating blur

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015121680A JP2017010095A (ja) 2015-06-17 2015-06-17 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体

Publications (2)

Publication Number Publication Date
JP2017010095A JP2017010095A (ja) 2017-01-12
JP2017010095A5 true JP2017010095A5 (ja) 2018-07-26

Family

ID=57588099

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015121680A Pending JP2017010095A (ja) 2015-06-17 2015-06-17 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体

Country Status (2)

Country Link
US (1) US20160371567A1 (ja)
JP (1) JP2017010095A (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6537228B2 (ja) * 2014-07-04 2019-07-03 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体
US10402696B2 (en) * 2016-01-04 2019-09-03 Texas Instruments Incorporated Scene obstruction detection using high pass filters
CN108171679B (zh) * 2017-12-27 2022-07-22 合肥君正科技有限公司 一种图像融合方法、系统及设备
JP2019169000A (ja) * 2018-03-23 2019-10-03 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
JP7131180B2 (ja) * 2018-07-30 2022-09-06 株式会社リコー 測距装置、測距方法、プログラム、移動体
AU2020278256A1 (en) * 2019-05-21 2021-12-23 Carmel Haifa University Economic Corp. Ltd. Physics-based recovery of lost colors in underwater and atmospheric images under wavelength dependent absorption and scattering
JP7455542B2 (ja) * 2019-09-27 2024-03-26 キヤノン株式会社 画像処理方法、プログラム、画像処理装置、学習済みモデルの製造方法、および、画像処理システム
CN113139911A (zh) * 2020-01-20 2021-07-20 北京迈格威科技有限公司 图像处理方法及装置、图像处理模型的训练方法及装置
CN113129235B (zh) * 2021-04-22 2024-10-08 深圳市深图医学影像设备有限公司 一种医学图像噪声抑制算法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4764974A (en) * 1986-09-22 1988-08-16 Perceptics Corporation Apparatus and method for processing an image
US7257273B2 (en) * 2001-04-09 2007-08-14 Mingjing Li Hierarchical scheme for blur detection in digital image using wavelet transform
JP2006019874A (ja) * 2004-06-30 2006-01-19 Fuji Photo Film Co Ltd 手ぶれ・ピンボケレベル報知方法および撮像装置
US7616826B2 (en) * 2006-07-28 2009-11-10 Massachusetts Institute Of Technology Removing camera shake from a single photograph using statistics of a natural image
US8249357B2 (en) * 2006-10-23 2012-08-21 Ben Gurion University Of The Negev, Research And Development Authority Blind restoration of images degraded by isotropic blur
US7924468B2 (en) * 2006-12-20 2011-04-12 Seiko Epson Corporation Camera shake determination device, printing apparatus and camera shake determination method
US7982776B2 (en) * 2007-07-13 2011-07-19 Ethicon Endo-Surgery, Inc. SBI motion artifact removal apparatus and method
JP2011010275A (ja) * 2009-05-26 2011-01-13 Sanyo Electric Co Ltd 画像再生装置及び撮像装置
US8682102B2 (en) * 2009-06-18 2014-03-25 Schlumberger Technology Corporation Cyclic noise removal in borehole imaging
US8452124B2 (en) * 2010-04-30 2013-05-28 Honeywell International Inc. Method and system for detecting motion blur
US8503801B2 (en) * 2010-09-21 2013-08-06 Adobe Systems Incorporated System and method for classifying the blur state of digital image pixels
CN103119927B (zh) * 2011-08-29 2017-03-22 松下知识产权经营株式会社 图像处理装置、摄像装置及图像处理方法
KR101705605B1 (ko) * 2011-11-14 2017-02-23 삼성전자주식회사 코드화된 조명을 이용하는 촬상 장치 및 이미지 처리 장치와 그 방법
JP5915238B2 (ja) * 2012-02-17 2016-05-11 株式会社ニコン 撮像装置
KR101810876B1 (ko) * 2012-03-13 2018-01-26 삼성전자주식회사 타일 단위를 기반으로 큰 입력 영상의 비균일 모션 블러를 제거하는 방법 및 장치
US9530079B2 (en) * 2012-11-09 2016-12-27 Nikon Corporation Point spread function classification using structural properties
US9357123B1 (en) * 2014-12-23 2016-05-31 Adobe Systems Incorporated Image defocus blur estimation

Similar Documents

Publication Publication Date Title
JP2017010095A5 (ja)
EP2860694A3 (en) Image processing apparatus, image pickup apparatus, image processing method, image processing program, and non-transitory computer-readable storage medium
EP2091260A3 (en) Image processing device, imaging device, and image processing program
JP2015070328A5 (ja)
JP2012054827A5 (ja) 画像処理装置、画像処理方法及び記憶媒体
JP2015085198A5 (ja)
JP2010020758A5 (ja)
JP2017102245A5 (ja)
JP2010258570A5 (ja)
JP2015019958A5 (ja) 磁気共鳴イメージング装置、画像処理装置、画像処理方法、及び画像処理プログラム
JP2015031779A5 (ja)
JP2013084247A5 (ja)
JP2017004464A5 (ja) 画像処理装置、画像処理方法及びプログラム
JP2013254480A5 (ja)
JP2013074313A5 (ja)
JPWO2020240720A5 (ja)
JP2012054795A5 (ja)
JP2012150289A5 (ja)
JP2014165800A5 (ja)
JP2015018084A5 (ja) 撮像装置、カメラシステム及び画像処理方法
JP2016028468A5 (ja)
JP2013128212A5 (ja)
JP7263149B2 (ja) 画像処理装置、画像処理方法、およびプログラム
JP2015041819A5 (ja)
JP2018055258A5 (ja)