JP6249638B2 - 画像処理装置、画像処理方法及びプログラム - Google Patents
画像処理装置、画像処理方法及びプログラム Download PDFInfo
- Publication number
- JP6249638B2 JP6249638B2 JP2013112024A JP2013112024A JP6249638B2 JP 6249638 B2 JP6249638 B2 JP 6249638B2 JP 2013112024 A JP2013112024 A JP 2013112024A JP 2013112024 A JP2013112024 A JP 2013112024A JP 6249638 B2 JP6249638 B2 JP 6249638B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- captured image
- transmittance
- pixel
- white balance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims 3
- 238000002834 transmittance Methods 0.000 claims description 74
- 239000010419 fine particle Substances 0.000 claims description 62
- 238000000034 method Methods 0.000 claims description 47
- 239000011859 microparticle Substances 0.000 claims description 19
- 238000003384 imaging method Methods 0.000 claims description 14
- 238000011946 reduction process Methods 0.000 claims description 9
- 230000006870 function Effects 0.000 description 12
- 230000003321 amplification Effects 0.000 description 9
- 238000003199 nucleic acid amplification method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000000593 degrading effect Effects 0.000 description 7
- 239000002245 particle Substances 0.000 description 6
- 238000009795 derivation Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 239000004071 soot Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20004—Adaptive image processing
- G06T2207/20012—Locally adaptive
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
- Processing Of Color Television Signals (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
図1は、本発明に係る画像処理装置の構成の一例を示す図である。
SR=(150+137+188)/3=158.33
SG=(130+150+110)/3=130.00
SB=(110+163+52)/3=108.33
S=(158.33+130.00+108.33)/3=132.22
となる。その結果、重みは、
WR=132.22/158.33=0.84
WG=132.22/130.00=1.02
WB=132.22/108.33=1.22
となる。そして、これらの値からホワイトバランス調整後のRGB値RWX、GWX、BWXは、以下のようになる。
<被写体201>
RWX=WR×RX=0.84×150=126.00
GWX=WG×GX=1.02×130=132.60
BWX=WB×BX=1.22×110=134.20
<被写体202>
RWX=0.84×137=115.08
GWX=1.02×150=153.00
BWX=1.22×163=198.86
<被写体203>
RWX=0.84×188=157.92
GWX=1.02×110=112.2
BWX=1.22×52=63.44
<被写体201>
RWX=WR×RX=0.84×110=92.40
GWX=WG×GX=1.02×80=81.60
BWX=WB×BX=1.22×50=61.00
<被写体202>
RWX=0.84×65=54.60
GWX=1.02×60=61.20
BWX=1.22×55=67.10
<被写体203>
RWX=0.84×180=151.2
GWX=1.02×100=102.00
BWX=1.22×40=48.80
まず、式(15)〜式(18)から、
S’R=(0.5×150+0.1×137+0.9×188)/3=85.97
S’G=(0.5×130+0.1×150+0.9×110)/3=59.67
S’B=(0.5×110+0.1×163+0.9×52)/3=39.37
S’=(85.97+59.67+39.37)/3=61.67
となる。その結果、式(12)〜式(14)から、重みは、
W’R=61.67/85.97=0.72
W’G=61.67/59.67=1.03
W’B=61.67/39.37=1.57
となる。このようにして透過率λXの値が大きい(霧等の影響が小さい)画素の画素値を強く反映させるような重みが導出される。
<被写体201>
R’WX= 0.72×110=79.2
G’WX= 1.03×80=82.4
B’WX= 1.57×50=78.5
<被写体202>
R’WX=0.72×65=46.8
G’WX=1.03×60=61.8
B’WX=1.57×55=86.35
<被写体203>
R’WX=0.72×180=129.6
G’WX=1.03×100=103.00
B’WX=1.57×40=62.8
これを3つ被写体(撮像画像の全画素)について平均すると、R’WXの平均は85.20、G’WXの平均は82.40、B’WXの平均は75.89となる。これは、従来の方法でホワイトバランスを調整した結果(RWXの平均:99.40、GWXの平均:81.60、BWXの平均:58.97)に比べてホワイトバランスの崩れが少ないことが分かる。
実施例1では、高画質化処理の内容としてホワイトバランス調整処理を実施する態様について説明した。次に、高画質化処理の内容としてノイズ低減処理を実施する態様について、実施例2として説明する。なお、実施例1と共通する部分については説明を省略ないしは簡略化し、差異点を中心に説明することとする。
実施例1では、ホワイトバランスの取れた微小粒子除去画像を得るために、撮像画像のホワイトバランスを調整した後、微小粒子除去処理を行っていた。次に、微小粒子除去処理を行った後にホワイトバランスを調整する態様について、実施例3として説明する。なお、実施例1と共通する部分については説明を省略ないしは簡略化し、差異点を中心に説明することとする。
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施例の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (9)
- 撮像時の大気中に含まれる微小粒子に対応する微小粒子成分を含む撮像画像データの各画素に入射する光の透過率に基づいて、ホワイトバランス調整処理のためのパラメータを導出する導出手段と、
前記撮像画像データに対し、導出された前記パラメータを用いて前記ホワイトバランス調整処理を実行して前記撮像画像データのホワイトバランスを調整し、前記透過率を用いて除去処理を実行して前記撮像画像データから前記微小粒子成分を除去することによって、前記撮像画像データの補正画像データを生成する生成手段と
を有し、
前記パラメータは、前記透過率が大きい画素の画素値を前記透過率が小さい画素の画素値よりも反映させるような重みである
ことを特徴とする画像処理装置。 - 前記ホワイトバランス調整処理を実行した後に、前記除去処理を実行して、前記補正画像データを生成することを特徴とする請求項1に記載の画像処理装置。
- 前記ホワイトバランス調整処理を実行する前に、前記除去処理を実行して、前記補正画像データを生成することを特徴とする請求項1に記載の画像処理装置。
- 撮像時の大気中に含まれる微小粒子に対応する微小粒子成分を含む撮像画像データの各画素に入射する光の透過率に基づいて、ノイズ低減処理のためのパラメータを導出する導出手段と、
前記撮像画像データに対し、導出された前記パラメータを用いて前記ノイズ低減処理を実行して前記撮像画像データのノイズを低減し、前記透過率を用いて除去処理を実行して前記撮像画像データから前記微小粒子成分を除去することによって、前記撮像画像データの補正画像データを生成する生成手段と
を有し、
前記パラメータは、ノイズ低減フィルタのフィルタ係数又はノイズ低減フィルタの参照画素範囲の大きさである
ことを特徴とする画像処理装置。 - 前記ノイズ低減処理を実行した後に、前記除去処理を実行して、前記補正画像データを生成することを特徴とする請求項4に記載の画像処理装置。
- 前記ノイズ低減処理を実行する前に、前記除去処理を実行して、前記補正画像データを生成することを特徴とする請求項4に記載の画像処理装置。
- 撮像時の大気中に含まれる微小粒子に対応する微小粒子成分を含む撮像画像データの各画素に入射する光の透過率に基づいて、ホワイトバランス調整処理のためのパラメータを導出するステップと、
前記撮像画像データに対し、導出された前記パラメータを用いて前記ホワイトバランス調整処理を実行して前記撮像画像データのホワイトバランスを調整し、前記透過率を用いて除去処理を実行して前記撮像画像データから前記微小粒子成分を除去することによって、前記撮像画像データの補正画像データを生成するステップと
を含み、
前記パラメータは、前記透過率が大きい画素の画素値を前記透過率が小さい画素の画素値よりも反映させるような重みである
ことを特徴とする画像処理方法。 - 撮像時の大気中に含まれる微小粒子に対応する微小粒子成分を含む撮像画像データの各画素に入射する光の透過率に基づいて、ノイズ低減処理のためのパラメータを導出するステップと、
前記撮像画像データに対し、導出された前記パラメータを用いて前記ノイズ低減処理を実行して前記撮像画像データのノイズを低減し、前記透過率を用いて除去処理を実行して前記撮像画像データから前記微小粒子成分を除去することによって、前記撮像画像データの補正画像データを生成するステップと
を含み、
前記パラメータは、ノイズ低減フィルタのフィルタ係数又はノイズ低減フィルタの参照画素範囲の大きさである
ことを特徴とする画像処理方法。 - コンピュータを請求項1乃至6のいずれか1項に記載されている画像処理装置として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013112024A JP6249638B2 (ja) | 2013-05-28 | 2013-05-28 | 画像処理装置、画像処理方法及びプログラム |
US14/277,379 US9886744B2 (en) | 2013-05-28 | 2014-05-14 | Image processing apparatus, image processing method, and storage medium with image quality improvement processing |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013112024A JP6249638B2 (ja) | 2013-05-28 | 2013-05-28 | 画像処理装置、画像処理方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2014232938A JP2014232938A (ja) | 2014-12-11 |
JP2014232938A5 JP2014232938A5 (ja) | 2016-07-14 |
JP6249638B2 true JP6249638B2 (ja) | 2017-12-20 |
Family
ID=51985186
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013112024A Active JP6249638B2 (ja) | 2013-05-28 | 2013-05-28 | 画像処理装置、画像処理方法及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9886744B2 (ja) |
JP (1) | JP6249638B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104809711B (zh) * | 2015-05-14 | 2017-07-04 | 西安近代化学研究所 | 固体推进剂羽流烟雾视频图像处理方法 |
JP6579868B2 (ja) | 2015-09-01 | 2019-09-25 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP6361631B2 (ja) * | 2015-10-29 | 2018-07-25 | Smk株式会社 | 車載センサ、車両用灯具及び車両 |
JP6635799B2 (ja) * | 2016-01-20 | 2020-01-29 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN105608683B (zh) * | 2016-03-11 | 2018-02-16 | 北京理工大学 | 一种单幅图像去雾方法 |
CN105809647B (zh) * | 2016-03-31 | 2020-06-05 | 北京奇虎科技有限公司 | 一种自动去雾拍照方法、装置和设备 |
CN106126579B (zh) * | 2016-06-17 | 2020-04-28 | 北京市商汤科技开发有限公司 | 物体识别方法和装置、数据处理装置和终端设备 |
CN108986049A (zh) * | 2018-07-20 | 2018-12-11 | 百度在线网络技术(北京)有限公司 | 用于处理图像的方法和装置 |
JP7421273B2 (ja) | 2019-04-25 | 2024-01-24 | キヤノン株式会社 | 画像処理装置及びその制御方法及びプログラム |
CN110232666B (zh) * | 2019-06-17 | 2020-04-28 | 中国矿业大学(北京) | 基于暗原色先验的地下管道图像快速去雾方法 |
KR102673404B1 (ko) * | 2022-12-27 | 2024-06-11 | 인하대학교 산학협력단 | 센서 융합을 통한 영상 디헤이징 시스템 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002232906A (ja) * | 2001-01-31 | 2002-08-16 | Ricoh Co Ltd | ホワイトバランス制御装置 |
JP4006347B2 (ja) * | 2002-03-15 | 2007-11-14 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法、記憶媒体、及びプログラム |
JP3767541B2 (ja) * | 2002-11-12 | 2006-04-19 | ソニー株式会社 | 光源推定装置、光源推定方法、撮像装置および画像処理方法 |
US7295233B2 (en) * | 2003-09-30 | 2007-11-13 | Fotonation Vision Limited | Detection and removal of blemishes in digital images utilizing original images of defocused scenes |
US20050122409A1 (en) * | 2003-12-08 | 2005-06-09 | Nikon Corporation | Electronic camera having color adjustment function and program therefor |
WO2007083307A2 (en) * | 2006-01-18 | 2007-07-26 | Technion - Research & Development Foundation Ltd. | System and method for correcting outdoor images for atmospheric haze distortion |
JP4776587B2 (ja) * | 2007-06-13 | 2011-09-21 | 国立大学法人北海道大学 | 画像処理装置,運転支援装置 |
JP5398156B2 (ja) * | 2008-03-04 | 2014-01-29 | キヤノン株式会社 | ホワイトバランス制御装置およびその制御方法並びに撮像装置 |
US8593537B2 (en) * | 2008-06-05 | 2013-11-26 | Canon Kabushiki Kaisha | Image sensing apparatus, control method thereof, and program for suppressing image deterioration caused by foreign substance |
CN102377929B (zh) * | 2008-09-03 | 2015-01-28 | 奥林巴斯映像株式会社 | 图像处理装置、摄像装置以及图像处理方法 |
US7916905B2 (en) * | 2009-02-02 | 2011-03-29 | Kabushiki Kaisha Toshiba | System and method for image facial area detection employing skin tones |
US8350933B2 (en) * | 2009-04-08 | 2013-01-08 | Yissum Research Development Company Of The Hebrew University Of Jerusalem, Ltd. | Method, apparatus and computer program product for single image de-hazing |
JP5343726B2 (ja) * | 2009-06-19 | 2013-11-13 | カシオ計算機株式会社 | 画像処理装置、及び画像処理プログラム |
JP5693271B2 (ja) * | 2011-02-03 | 2015-04-01 | キヤノン株式会社 | 画像処理装置及び方法 |
JP5820257B2 (ja) | 2011-02-18 | 2015-11-24 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
EP2690860B1 (en) * | 2011-03-24 | 2016-04-20 | Mitsubishi Electric Corporation | Image processing device and method |
JP5771430B2 (ja) * | 2011-04-08 | 2015-08-26 | オリンパス株式会社 | 霞除去画像処理装置、霞除去画像処理方法及び霞除去画像処理プログラム |
CN102170574B (zh) * | 2011-05-23 | 2012-12-26 | 北京工业大学 | 一种实时视频去雾处理系统 |
JP5725975B2 (ja) | 2011-05-27 | 2015-05-27 | キヤノン株式会社 | 撮像装置及び撮像方法 |
WO2013018101A1 (en) * | 2011-08-03 | 2013-02-07 | Indian Institute Of Technology, Kharagpur | Method and system for removal of fog, mist or haze from images and videos |
JP6006543B2 (ja) * | 2012-06-22 | 2016-10-12 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP6390847B2 (ja) * | 2012-11-13 | 2018-09-19 | 日本電気株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN102968767A (zh) * | 2012-11-26 | 2013-03-13 | 中国科学院长春光学精密机械与物理研究所 | 带有白平衡校正的雾天降质图像实时复原方法 |
JP6366251B2 (ja) * | 2013-01-07 | 2018-08-01 | キヤノン株式会社 | 撮像装置および撮像装置の制御方法 |
JP6120665B2 (ja) * | 2013-04-26 | 2017-04-26 | オリンパス株式会社 | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム |
US9756222B2 (en) * | 2013-06-26 | 2017-09-05 | Nvidia Corporation | Method and system for performing white balancing operations on captured images |
-
2013
- 2013-05-28 JP JP2013112024A patent/JP6249638B2/ja active Active
-
2014
- 2014-05-14 US US14/277,379 patent/US9886744B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20140355903A1 (en) | 2014-12-04 |
US9886744B2 (en) | 2018-02-06 |
JP2014232938A (ja) | 2014-12-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6249638B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US10210643B2 (en) | Image processing apparatus, image processing method, and storage medium storing a program that generates an image from a captured image in which an influence of fine particles in an atmosphere has been reduced | |
JP6485078B2 (ja) | 画像処理方法および画像処理装置 | |
US10145790B2 (en) | Image processing apparatus, image processing method, image capturing device and storage medium | |
JP6282095B2 (ja) | 画像処理装置、画像処理方法およびプログラム。 | |
US10027897B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US9558534B2 (en) | Image processing apparatus, image processing method, and medium | |
JP2017037357A (ja) | 画像処理装置、プログラムおよび記録媒体 | |
US10565687B2 (en) | Image processing apparatus, imaging apparatus, image processing method, image processing program, and recording medium | |
US20170053384A1 (en) | Image-processing device, image-capturing device, image-processing method, and storage medium | |
US20230274398A1 (en) | Image processing apparatus for reducing influence of fine particle in an image, control method of same, and non-transitory computer-readable storage medium | |
TW201336303A (zh) | 影像擷取系統及應用於影像擷取系統的影像處理方法 | |
JP5863236B2 (ja) | 画像処理装置、画像処理方法 | |
US9298319B2 (en) | Multi-touch recognition apparatus using filtering and a difference image and control method thereof | |
JP6494817B2 (ja) | 画像処理装置、画像処理方法およびプログラム。 | |
JP6324192B2 (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
JP2022069197A (ja) | 画像処理装置及びその制御方法及びプログラム | |
JP6462996B2 (ja) | 画像処理装置、画像処理方法、制御プログラム、および記録媒体 | |
JP2023161738A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
Yoshida et al. | Visibility Enhancement Technology for Cameras. | |
WO2014103367A1 (ja) | 画像処理装置および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160526 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160526 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170321 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170517 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171024 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171121 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6249638 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |