JP5909865B2 - 画像処理プログラム、画像処理方法、画像処理装置、撮像装置 - Google Patents
画像処理プログラム、画像処理方法、画像処理装置、撮像装置 Download PDFInfo
- Publication number
- JP5909865B2 JP5909865B2 JP2011092232A JP2011092232A JP5909865B2 JP 5909865 B2 JP5909865 B2 JP 5909865B2 JP 2011092232 A JP2011092232 A JP 2011092232A JP 2011092232 A JP2011092232 A JP 2011092232A JP 5909865 B2 JP5909865 B2 JP 5909865B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- image processing
- spatial frequency
- processing program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 77
- 238000003384 imaging method Methods 0.000 title claims description 38
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000000034 method Methods 0.000 claims description 88
- 230000008569 process Effects 0.000 claims description 63
- 238000000354 decomposition reaction Methods 0.000 claims description 50
- 238000012935 Averaging Methods 0.000 claims description 34
- 239000002131 composite material Substances 0.000 claims description 34
- 230000015572 biosynthetic process Effects 0.000 claims description 30
- 238000003786 synthesis reaction Methods 0.000 claims description 30
- 230000002194 synthesizing effect Effects 0.000 claims description 13
- 230000035945 sensitivity Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims 2
- 230000006870 function Effects 0.000 description 13
- 230000000694 effects Effects 0.000 description 10
- 238000011156 evaluation Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 6
- 238000009499 grossing Methods 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000002146 bilateral effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000001308 synthesis method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
Description
また、本発明の画像処理プログラムは、複数枚の画像の撮影期間内に撮影条件が変化したか否かを判別する判別ステップと、前記判別ステップにより前記撮影条件が変化していると判別された場合に、前記複数枚の画像の各々を周波数分解し、複数階層の空間周波数成分を画像毎に生成する分解ステップと、前記分解ステップにより画像毎に生成された複数階層の空間周波数成分を、階層毎に画像間で平均化し、階層毎の平均空間周波数成分を生成する平均化ステップと、前記平均化ステップにより生成された前記階層毎の平均空間周波数成分を合成する第1の合成ステップと、前記判別ステップにより前記撮影条件が変化していないと判別された場合に、前記分解ステップによる前記複数枚の画像に対する周波数分解を実行せずに前記複数枚の画像を合成する第2の合成ステップと、を含む。
以下、本発明の第1実施形態として画像処理機能を搭載したコンピュータを説明する。
以下、本発明の第2実施形態としてコンピュータを説明する。なお、本実施形態は第1実施形態の変形例であるので、ここでは第1実施形態との相違点のみを説明する。相違点は、合成処理の一部にある。
以下、本発明の第3実施形態として画像処理機能を搭載した電子カメラを説明する。
なお、上述した何れかの実施形態の制御部は、次のように動作してもよい。
Claims (13)
- 複数枚の画像から、前記複数枚の画像の各々よりも解像度の高い合成画像を生成する処理をコンピュータに実行させる画像処理プログラムであって、
前記複数枚の画像の撮影期間内に撮影条件が変化したか否かを判別する判別ステップと、
前記判別ステップにより前記撮影条件が変化していると判別された場合に、前記複数枚の画像の各々を周波数分解し、複数階層の空間周波数成分を画像毎に生成する分解ステップと、
前記分解ステップにより画像毎に生成された複数階層の空間周波数成分を、階層毎に画像間で平均化し、階層毎の平均空間周波数成分を生成する平均化ステップと、
前記平均化ステップにより生成された前記階層毎の平均空間周波数成分を合成して前記合成画像を生成する第1の合成ステップと、
前記判別ステップにより前記撮影条件が変化していないと判別された場合に、前記分解ステップによる前記複数枚の画像に対する周波数分解を実行せずに前記複数枚の画像を合成して前記合成画像を生成する第2の合成ステップと、
を含む画像処理プログラム。 - 請求項1に記載の画像処理プログラムにおいて、
前記分解ステップの前又は後のタイミングで前記複数枚の画像の位置合わせを行う位置合わせステップを更に含む画像処理プログラム。 - 請求項1又は請求項2に記載の画像処理プログラムにおいて、
前記分解ステップでは、
前記複数枚の画像の各々を、ラプラシアンピラミッド表現された複数階層の空間周波数成分へと分解する画像処理プログラム。 - 請求項1から請求項3のいずれか1項に記載の画像処理プログラムにおいて、
前記平均化ステップでは、
前記平均化に重み付け平均を採用する画像処理プログラム。 - 請求項4に記載の画像処理プログラムにおいて、
前記平均化ステップでは、
前記重み付け平均の重みを、前記複数枚の画像の各々の位置合わせ精度に基づき設定する画像処理プログラム。 - 請求項1から請求項5のいずれか1項に記載の画像処理プログラムにおいて、
前記第1の合成ステップでは、
前記合成画像に対して再構成処理を施す画像処理プログラム。 - 請求項1から請求項5のいずれか1項に記載の画像処理プログラムにおいて、
前記第1の合成ステップでは、
前記合成を行う前に、前記階層毎の平均空間周波数成分の各々に対して再構成処理を施す画像処理プログラム。 - 請求項1から請求項7のいずれか1項に記載の画像処理プログラムにおいて、
前記複数階層の空間周波数成分は、
元画像に対して空間フィルタ処理を行うことで抽出される第1周波数成分を前記元画像から減算した第1差分画像と、
前記第1周波数成分に対して空間フィルタ処理を行うことで抽出される第2周波数成分と、
前記第1周波数成分から前記第2周波数成分を減算した第2差分画像と、
を含む画像処理プログラム。 - 請求項1から請求項8のいずれか1項に記載の画像処理プログラムにおいて、
前記撮影条件は、露出、ホワイトバランス調整量、ISO感度のいずれかを含む画像処理プログラム。 - 複数枚の画像の撮影期間内に撮影条件が変化したか否かを判別する判別ステップと、
前記判別ステップにより前記撮影条件が変化していると判別された場合に、前記複数枚の画像の各々を周波数分解し、複数階層の空間周波数成分を画像毎に生成する分解ステップと、
前記分解ステップにより画像毎に生成された複数階層の空間周波数成分を、階層毎に画像間で平均化し、階層毎の平均空間周波数成分を生成する平均化ステップと、
前記平均化ステップにより生成された前記階層毎の平均空間周波数成分を合成する第1の合成ステップと、
前記判別ステップにより前記撮影条件が変化していないと判別された場合に、前記分解ステップによる前記複数枚の画像に対する周波数分解を実行せずに前記複数枚の画像を合成する第2の合成ステップと、
を含む画像処理プログラム。 - 複数枚の画像から、前記複数枚の画像の各々よりも解像度の高い合成画像を生成する画像処理方法であって、
複数枚の画像の撮影期間内に撮影条件が変化したか否かを判別する判別ステップと、
前記判別ステップにより前記撮影条件が変化していると判別された場合に、前記複数枚の画像の各々を周波数分解し、複数階層の空間周波数成分を画像毎に生成する分解ステップと、
前記分解ステップにより画像毎に生成された複数階層の空間周波数成分を、階層毎に画像間で平均化し、階層毎の平均空間周波数成分を生成する平均化ステップと、
前記平均化ステップにより生成された前記階層毎の平均空間周波数成分を合成して前記合成画像を生成する第1の合成ステップと、
前記判別ステップにより前記撮影条件が変化していないと判別された場合に、前記分解ステップによる前記複数枚の画像に対する周波数分解を実行せずに前記複数枚の画像を合成して前記合成画像を生成する第2の合成ステップと、
を含む画像処理方法。 - 複数枚の画像から、前記複数枚の画像の各々よりも解像度の高い合成画像を生成する画像処理装置であって、
複数枚の画像の撮影期間内に撮影条件が変化したか否かを判別する判別手段と、
前記判別手段により前記撮影条件が変化していると判別された場合に、前記複数枚の画像の各々を周波数分解し、複数階層の空間周波数成分を画像毎に生成する分解手段と、
前記分解手段により画像毎に生成された複数階層の空間周波数成分を、階層毎に画像間で平均化し、階層毎の平均空間周波数成分を生成する平均化手段と、
前記平均化手段により生成された前記階層毎の平均空間周波数成分を合成して前記合成画像を生成する第1の合成手段と、
前記判別手段により前記撮影条件が変化していないと判別された場合に、前記分解手段による前記複数枚の画像に対する周波数分解を実行せずに前記複数枚の画像を合成して前記合成画像を生成する第2の合成手段と、
を備えた画像処理装置。 - 被写体を撮像して画像を生成する撮像手段と、
前記撮像手段が生成した複数枚の画像を処理する請求項12に記載の画像処理装置と、
を備えた撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011092232A JP5909865B2 (ja) | 2011-04-18 | 2011-04-18 | 画像処理プログラム、画像処理方法、画像処理装置、撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011092232A JP5909865B2 (ja) | 2011-04-18 | 2011-04-18 | 画像処理プログラム、画像処理方法、画像処理装置、撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012226489A JP2012226489A (ja) | 2012-11-15 |
JP5909865B2 true JP5909865B2 (ja) | 2016-04-27 |
Family
ID=47276604
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011092232A Active JP5909865B2 (ja) | 2011-04-18 | 2011-04-18 | 画像処理プログラム、画像処理方法、画像処理装置、撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5909865B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6378531B2 (ja) * | 2014-05-07 | 2018-08-22 | 日本放送協会 | 超解像装置及びプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4429816B2 (ja) * | 2004-06-10 | 2010-03-10 | オリンパス株式会社 | 撮像装置および画像の高解像度化方法 |
JP3837575B2 (ja) * | 2004-10-29 | 2006-10-25 | 国立大学法人東京工業大学 | 超解像処理の高速化方法 |
EP1837826A1 (en) * | 2006-03-20 | 2007-09-26 | Matsushita Electric Industrial Co., Ltd. | Image acquisition considering super-resolution post-interpolation |
JP2011055259A (ja) * | 2009-09-02 | 2011-03-17 | Olympus Corp | 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムが格納されたプログラム記憶媒体 |
-
2011
- 2011-04-18 JP JP2011092232A patent/JP5909865B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012226489A (ja) | 2012-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2312858B1 (en) | Image processing apparatus, imaging apparatus, image processing method, and program | |
TWI298466B (en) | Computing a higher resolution image from multiple lower resolution images using model-based, robust bayesian estimation | |
KR101609491B1 (ko) | 화상 합성 장치, 화상 합성 방법 및 기록 매체 | |
JP5645051B2 (ja) | 画像処理装置 | |
JP2013219744A (ja) | 画像合成装置及び画像合成用コンピュータプログラム | |
WO2021106853A1 (ja) | 画像処理装置、画像処理方法、学習装置、学習方法、撮像装置、及びプログラム | |
JP5479187B2 (ja) | 画像処理装置及びそれを用いた撮像装置 | |
JP2012023455A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US20110032269A1 (en) | Automatically Resizing Demosaicked Full-Color Images Using Edge-Orientation Maps Formed In The Demosaicking Process | |
EP2908286A1 (en) | Imaging system, imaging apparatus, and image processing apparatus | |
JP5909865B2 (ja) | 画像処理プログラム、画像処理方法、画像処理装置、撮像装置 | |
JP7443030B2 (ja) | 学習方法、プログラム、学習装置、および、学習済みウエイトの製造方法 | |
JP5527035B2 (ja) | 画像処理プログラム、画像処理装置および撮像装置 | |
JP6525700B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP7183015B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP5832095B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2011043901A (ja) | 画像処理装置、画像処理方法、画像処理プログラム、および、電子機器 | |
JP2020091910A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2011151597A (ja) | 画像処理装置および画像処理プログラム並びに電子カメラ | |
Patil et al. | Interpolation for super resolution imaging | |
JP7496564B2 (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP2019016222A (ja) | 画像処理装置およびその制御方法 | |
EP3992901A1 (en) | Image correction device | |
Fu et al. | A Multi-resolution Image Fusion Algorithm Based on Multi-factor Weights. | |
Xiao et al. | Multi-level feature aggregation network for high dynamic range imaging |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140417 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150410 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150804 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150918 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160301 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160314 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5909865 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |