JP5184574B2 - 撮像装置、画像処理装置、および画像処理方法 - Google Patents
撮像装置、画像処理装置、および画像処理方法 Download PDFInfo
- Publication number
- JP5184574B2 JP5184574B2 JP2010104889A JP2010104889A JP5184574B2 JP 5184574 B2 JP5184574 B2 JP 5184574B2 JP 2010104889 A JP2010104889 A JP 2010104889A JP 2010104889 A JP2010104889 A JP 2010104889A JP 5184574 B2 JP5184574 B2 JP 5184574B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- resolution
- kernel
- blur
- blur kernel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 44
- 238000003672 processing method Methods 0.000 title claims description 6
- 230000015556 catabolic process Effects 0.000 claims description 30
- 238000006731 degradation reaction Methods 0.000 claims description 30
- 238000005452 bending Methods 0.000 claims description 11
- 238000000605 extraction Methods 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 claims description 4
- 230000009466 transformation Effects 0.000 claims description 3
- 238000000034 method Methods 0.000 description 40
- 238000006243 chemical reaction Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 8
- 230000006866 deterioration Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 3
- 230000002265 prevention Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
Images
Classifications
-
- G06T5/73—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration by the use of local operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20201—Motion blur correction
Description
前記第2の縮小劣化画像および前記第2のブラー・カーネルの初期値に基づいて、手振れによるぼやけを規定するブラー・カーネルの推定を行い、前記第2の解像度に対応する解像度を有する第2のブラー・カーネルの推定を行うステップ(E)とを含み、前記ステップ(D)は、前記第1のブラー・カーネルの特徴点を抽出するステップ(d1)と、前記特徴点の座標を拡大変換するステップ(d2)と、拡大変換された座標を有する新しい特徴点を連結するステップ(d3)とを含む。
20 撮影レンズ
15 絞り機能を有するシャッタ
30 撮像素子駆動部
100 撮像部
200 信号処理部
220 画像処理部
222 カーネル推定部
223 カーネル拡大部
225 特徴点抽出部
226 座標変換部
227 特徴点連結部
240 メモリ
260 インターフェース(IF)
300 表示部
400 記録媒体
500 システム制御部
Claims (6)
- 手振れによるぼやけのある劣化画像からぼやけを低減した画像を復元する画像処理装置であって、
入力された劣化画像の解像度とは異なる解像度を有する複数の縮小劣化画像を生成する縮小画像生成部と、
前記縮小画像生成部から解像度が異なる縮小劣化画像を受け取り、手振れによるぼやけを規定するブラー・カーネルの推定を、解像度が増加する順番で前記縮小劣化画像に基づいて順次行い、各縮小劣化画像の解像度に対応する解像度を有するブラー・カーネルを生成するカーネル推定部と、
前記カーネル推定部によって生成されたブラー・カーネルを受け取り、受け取ったブラー・カーネルの解像度を高めることにより、受け取ったブラー・カーネルの解像度よりも高い解像度を有するブラー・カーネルの初期値を生成するカーネル拡大部と、
を備え、
前記カーネル推定部は、第1の解像度を有する縮小劣化画像に基づいてブラー・カーネルの推定を行うとき、前記第1の解像度に対応する解像度を有するブラー・カーネルの初期値に基づいて行い、その後、前記第1の解像度よりも高い第2の解像度を有する縮小劣化画像に基づいてブラー・カーネルの推定を行うとき、前記第2の解像度に対応する解像度を有するブラー・カーネルの初期値に基づいて行い、
前記カーネル拡大部は、前記カーネル推定部から受け取ったブラー・カーネルの特徴点を抽出し、前記特徴点の座標を拡大変換することによって得られた新しい特徴点を連結することにより、解像度を高めたブラー・カーネルの初期値を生成する、画像処理装置。 - 前記カーネル拡大部は、
前記カーネル推定部から受け取ったブラー・カーネルの特徴点を抽出する特徴点抽出部と、
前記特徴点の座標を拡大変換する座標変換部と、
座標変換によって得られた新しい特徴点を連結する特徴点連結部と、
を有している、請求項1に記載の画像処理装置。 - 前記特徴点抽出部は、前記カーネル推定部から受け取ったブラー・カーネルのゼロではない係数列の屈曲部に位置する屈曲点と、前記ゼロではない係数列の始点および終点を、前記特徴点として抽出する、請求項2に記載の画像処理装置。
- 前記特徴点抽出部は、前記カーネル推定部から受け取ったブラー・カーネルのゼロではない係数列のうち、隣接する3つの係数に対応する3つの画素が屈曲して配置されているとき、前記3つの画素の中心に位置する画素を屈曲点と判定する、請求項3に記載の画像処理装置。
- 撮像面上に配列された複数の光感知セルを備える撮像素子と、
前記撮像面上に像を形成する光学系と、
前記撮像素子から得られる信号を処理する画像処理部と、
を備え、
前記画像処理部は、請求項1に記載の画像処理装置によって実現されている、撮像装置。 - 手振れによるぼやけのある劣化画像からぼやけを低減した画像を復元する画像処理方法であって、
入力された劣化画像の解像度よりも低い第1の解像度を有する第1の縮小劣化画像を生成するステップ(A)と、
前記第1の縮小劣化画像に基づいて手振れによるぼやけを規定するブラー・カーネルの推定を行い、前記第1の縮小劣化画像の解像度に対応する解像度を有する第1のブラー・カーネルを生成するステップ(B)と、
前期第1の解像度よりも高い第2の解像度を有する第2の縮小劣化画像を生成するステップ(C)と、
前記第1ブラー・カーネルに基づいて、前記第2の解像度に対応する解像度を有する第2のブラー・カーネルの初期値を生成するステップ(D)と、
前記第2の縮小劣化画像および前記第2のブラー・カーネルの初期値に基づいて、手振れによるぼやけを規定するブラー・カーネルの推定を行い、前記第2の解像度に対応する解像度を有する第2のブラー・カーネルの推定を行うステップ(E)と、
を含み、
前記ステップ(D)は、
前記第1のブラー・カーネルの特徴点を抽出するステップ(d1)と、
前記特徴点の座標を拡大変換するステップ(d2)と、
拡大変換された座標を有する新しい特徴点を連結するステップ(d3)と、
を含む画像処理方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010104889A JP5184574B2 (ja) | 2010-04-30 | 2010-04-30 | 撮像装置、画像処理装置、および画像処理方法 |
US13/379,397 US8553097B2 (en) | 2010-04-30 | 2011-01-27 | Reducing blur based on a kernel estimation of an imaging device |
PCT/JP2011/000445 WO2011135761A1 (ja) | 2010-04-30 | 2011-01-27 | 撮像装置、画像処理装置、および画像処理方法 |
CN201180002600.6A CN102473294B (zh) | 2010-04-30 | 2011-01-27 | 摄像装置、图像处理装置和图像处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010104889A JP5184574B2 (ja) | 2010-04-30 | 2010-04-30 | 撮像装置、画像処理装置、および画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011233058A JP2011233058A (ja) | 2011-11-17 |
JP5184574B2 true JP5184574B2 (ja) | 2013-04-17 |
Family
ID=44861090
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010104889A Expired - Fee Related JP5184574B2 (ja) | 2010-04-30 | 2010-04-30 | 撮像装置、画像処理装置、および画像処理方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8553097B2 (ja) |
JP (1) | JP5184574B2 (ja) |
CN (1) | CN102473294B (ja) |
WO (1) | WO2011135761A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104091312B (zh) * | 2014-07-11 | 2015-08-19 | 中国人民解放军国防科学技术大学 | 一种根据图像频谱信息提取模糊核先验的单透镜成像方法 |
CN104751456B (zh) | 2015-03-13 | 2017-10-20 | 深圳大学 | 基于条件直方图码书的盲图像质量评价方法 |
US10346956B2 (en) * | 2015-07-22 | 2019-07-09 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device |
US11941501B2 (en) | 2018-05-30 | 2024-03-26 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
KR20190136891A (ko) * | 2018-05-30 | 2019-12-10 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
CN110557522A (zh) * | 2018-05-31 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 一种去除视频抖动的方法及装置 |
CN109544462A (zh) * | 2018-09-28 | 2019-03-29 | 北京交通大学 | 基于自适应选择模糊核的车牌图像去模糊方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0962837A (ja) | 1995-08-18 | 1997-03-07 | Ricoh Co Ltd | 線分拡大描画方法および線分拡大描画装置 |
JP2006129236A (ja) | 2004-10-29 | 2006-05-18 | Sanyo Electric Co Ltd | リンギング除去装置およびリンギング除去プログラムを記録したコンピュータ読み取り可能な記録媒体 |
EP1779322B1 (en) * | 2004-11-10 | 2008-01-09 | Fotonation Vision Limited | A digital image acquisition system having means for determining a camera motion blur function |
US20060291751A1 (en) * | 2004-12-16 | 2006-12-28 | Peyman Milanfar | Robust reconstruction of high resolution grayscale images from a sequence of low-resolution frames (robust gray super-resolution) |
US7580620B2 (en) | 2006-05-08 | 2009-08-25 | Mitsubishi Electric Research Laboratories, Inc. | Method for deblurring images using optimized temporal coding patterns |
JP2009111596A (ja) * | 2007-10-29 | 2009-05-21 | Sanyo Electric Co Ltd | 撮像装置 |
CN101449983B (zh) * | 2007-11-29 | 2014-12-10 | 深圳迈瑞生物医疗电子股份有限公司 | 超声线阵偏转成像的扫描变换插值方法和装置 |
KR100990791B1 (ko) * | 2008-12-31 | 2010-10-29 | 포항공과대학교 산학협력단 | 영상의 블러 제거 방법 및 블러 제거 방법이 기록된 기록매체 |
US8208746B2 (en) * | 2009-06-29 | 2012-06-26 | DigitalOptics Corporation Europe Limited | Adaptive PSF estimation technique using a sharp preview and a blurred image |
US8330827B2 (en) * | 2009-11-19 | 2012-12-11 | Eastman Kodak Company | Increasing image resolution using combined differential image |
US8594464B2 (en) * | 2011-05-26 | 2013-11-26 | Microsoft Corporation | Adaptive super resolution for video enhancement |
-
2010
- 2010-04-30 JP JP2010104889A patent/JP5184574B2/ja not_active Expired - Fee Related
-
2011
- 2011-01-27 US US13/379,397 patent/US8553097B2/en not_active Expired - Fee Related
- 2011-01-27 CN CN201180002600.6A patent/CN102473294B/zh not_active Expired - Fee Related
- 2011-01-27 WO PCT/JP2011/000445 patent/WO2011135761A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
CN102473294B (zh) | 2015-04-22 |
JP2011233058A (ja) | 2011-11-17 |
US8553097B2 (en) | 2013-10-08 |
US20120105658A1 (en) | 2012-05-03 |
CN102473294A (zh) | 2012-05-23 |
WO2011135761A1 (ja) | 2011-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5596138B2 (ja) | 撮像装置、画像処理装置、画像処理方法、および画像処理プログラム | |
JP5222472B2 (ja) | 画像処理装置、画像復元方法およびプログラム | |
JP5184574B2 (ja) | 撮像装置、画像処理装置、および画像処理方法 | |
JP5909540B2 (ja) | 画像処理表示装置 | |
US8390704B2 (en) | Image deblurring using a spatial image prior | |
JP5204165B2 (ja) | 画像復元装置および画像復元方法 | |
JP5468404B2 (ja) | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 | |
JP5237978B2 (ja) | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 | |
WO2007119680A1 (ja) | 撮像装置 | |
CN111667416A (zh) | 图像处理方法、装置、学习模型制造方法和图像处理系统 | |
JP5541205B2 (ja) | 画像処理装置、撮像装置、画像処理プログラムおよび画像処理方法 | |
JP2018107526A (ja) | 画像処理装置、撮像装置、画像処理方法およびコンピュータのプログラム | |
JP4958806B2 (ja) | ぶれ検出装置、ぶれ補正装置及び撮像装置 | |
US10715723B2 (en) | Image processing apparatus, image acquisition system, image processing method, and image processing program | |
US9007471B2 (en) | Digital photographing apparatus, method for controlling the same, and computer-readable medium | |
JP2009153046A (ja) | ぶれ補正装置及び方法並びに撮像装置 | |
JP2015119428A (ja) | 画像処理方法、画像処理装置、撮像装置、画像処理プログラム、および、記憶媒体 | |
JP4606976B2 (ja) | 画像処理装置 | |
JP6818461B2 (ja) | 撮像装置、画像処理装置、画像処理方法および画像処理プログラム | |
JP5057665B2 (ja) | 画像処理装置 | |
JP2015119427A (ja) | 画像処理方法、画像処理装置、撮像装置、画像処理プログラム、および、記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120824 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130116 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5184574 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160125 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |