JP5947456B2 - 静止映像に含まれたヘーズを除去する映像処理装置及びその方法 - Google Patents
静止映像に含まれたヘーズを除去する映像処理装置及びその方法 Download PDFInfo
- Publication number
- JP5947456B2 JP5947456B2 JP2015510192A JP2015510192A JP5947456B2 JP 5947456 B2 JP5947456 B2 JP 5947456B2 JP 2015510192 A JP2015510192 A JP 2015510192A JP 2015510192 A JP2015510192 A JP 2015510192A JP 5947456 B2 JP5947456 B2 JP 5947456B2
- Authority
- JP
- Japan
- Prior art keywords
- transmission amount
- block
- haze
- video
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 49
- 238000000034 method Methods 0.000 title claims description 39
- 230000005540 biological transmission Effects 0.000 claims description 184
- 238000004364 calculation method Methods 0.000 claims description 30
- 238000005259 measurement Methods 0.000 claims description 14
- 238000013459 approach Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 7
- 239000002245 particle Substances 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Chemical compound O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 5
- 238000000149 argon plasma sintering Methods 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 230000008439 repair process Effects 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- 238000009499 grossing Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20192—Edge enhancement; Edge preservation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Description
は本来客体が有する明るさの平均を意味する。
はピクセル単位の近似伝達量を、Ipはカメラから獲得した明るさを意味し、a、bはエッジ保存フィルターを適用して求められた線形関数の変数を意味する。
110 :ヘーズ明るさ測定部
120 :ブロック単位伝達量推定部
130 :ピクセル単位伝達量推定部
140 :映像復元部
(関連する出願の参照)
Claims (11)
- ヘーズが含まれた映像においてヘーズの明るさを測定するヘーズ明るさ測定部と、
前記映像からコントラスト及び映像損失量による最終費用関数値に基づくブロック単位の伝達量を推定し、前記ブロック単位の伝達量を用いてピクセル単位伝達量を推定する伝達量推定部と、
前記ヘーズの明るさと前記ピクセル単位の伝達量を用いて前記映像を修復する映像復元部と、
を含む静止映像に含まれたヘーズを除去する映像処理装置であって、
前記ヘーズ明るさ測定部は、
前記映像を予め定められた第1の一定個数のブロックに分ける領域分割モジュールと、
前記分割された各ブロック毎にピクセル値の平均と標準偏差をそれぞれ求め、各ブロック毎に平均と標準偏差の差を用いて代表値を求める代表値計算モジュールと、
前記各ブロック毎に求められた代表値の中からその値が最も大きいブロックを選択し、前記選択されたブロックの広さが既設定の広さ以下になった場合、前記選択されたブロックにおいて最も明るい画素値をヘーズの明るさとして選択する画素値選択モジュールと、
を含むことを特徴とする静止映像に含まれたヘーズを除去する映像処理装置。 - ヘーズが含まれた映像においてヘーズの明るさを測定するヘーズ明るさ測定部と、
前記映像からコントラスト及び映像損失量による最終費用関数値に基づくブロック単位の伝達量を推定し、前記ブロック単位の伝達量を用いてピクセル単位伝達量を推定する伝達量推定部と、
前記ヘーズの明るさと前記ピクセル単位の伝達量を用いて前記映像を修復する映像復元部と、
を含む静止映像に含まれたヘーズを除去する映像処理装置であって、
前記伝達量推定部は、
前記映像を予め定められた第2の一定個数のブロックに分割し、各ブロック別にコントラストと映像損失量による最終費用関数を用いてブロック単位伝達量を推定するブロック単位伝達量推定部と、
前記ブロック単位伝達量にエッジ保存フィルターを適用してピクセル単位伝達量に変換するピクセル単位伝達量推定部と、
を含むことを特徴とする静止映像に含まれたヘーズを除去する映像処理装置。 - 前記ブロック単位伝達量推定部は、
前記映像を予め定められた第2の一定個数に分割する映像分割モジュールと、
各ブロック毎に予め定められた範囲の伝達量を一定の比率ずつ変化させながらコントラストと映像損失量をそれぞれ求める費用関数計算モジュールと、
前記コントラストと映像損失量による最終費用関数を用いてブロック毎に最終費用関数値を求める最終費用関数計算モジュールと、
前記求められた最終費用関数値の中からその値を最小にする伝達量をブロック単位伝達量として検出するブロック単位伝達量検出モジュールと、
を含むことを特徴とする請求項2に記載の静止映像に含まれたヘーズを除去する映像処理装置。 - 前記費用関数計算モジュールは、各画素の明るさ値を利用した分散に「(―1)」を掛けてコントラストEcを求めることを特徴とする請求項3に記載の静止映像に含まれたヘーズを除去する映像処理装置。
- 前記費用関数計算モジュールは、ブロック単位伝達量が「0」に限りなく近づく場合、「0」未満または「255」超えの画素値を有する領域の面積を用いて映像損失量を求めることを特徴とする請求項3に記載の静止映像に含まれたヘーズを除去する映像処理装置。
- 前記最終費用関数計算モジュールは、前記コントラスト及び映像損失量を含む最終費用関数を生成し、0から1の間の任意の値に伝達量を変化させながら最終費用関数値を求めることを特徴とする請求項3に記載の静止映像に含まれたヘーズを除去する映像処理装置。
- 前記ピクセル単位伝達量推定部は、各ブロック毎に画素値の平均を求めて近似伝達量を定義し、前記ブロック単位伝達量と前記近似伝達量との差が最小となる変数値を求めた後、前記求められた変数値による近似伝達量をピクセル単位伝達量として推定することを特徴とする請求項2に記載の静止映像に含まれたヘーズを除去する映像処理装置。
- 映像処理装置がヘーズが含まれた静止映像を修復する方法において、
(a)ヘーズが含まれた映像にてヘーズの明るさを測定する段階と、
(b)前記映像からコントラスト及び映像損失量による最終費用関数値に基づくブロック単位伝達量を推定し、前記ブロック単位伝達量を用いてピクセル単位伝達量を推定する段階と、
(c)前記ヘーズの明るさと前記ピクセル単位伝達量を用いて前記映像におけるヘーズを除去して映像を修復する段階と、
を含む静止映像に含まれたヘーズを除去する方法であって、
前記(a)段階は、
前記映像を予め定められた第1の一定個数のブロックに分割する段階と、
前記分割された各ブロック毎にピクセル値の平均と標準偏差をそれぞれ求める段階と、
各ブロック毎に平均と標準偏差の差を用いて代表値をそれぞれ求める段階と、
前記各ブロック毎に求められた代表値の中からその値が最も大きいブロックを選択する段階と、
前記選択されたブロックの広さが予め定められた広さ以下か否かを判断する段階と、
前記判断の結果、予め定められた広さ以下となった場合、前記選択されたブロックにおいて最も明るい画素値を選択し、ヘーズの明るさとして推定する段階と、
を含むことを特徴とする静止映像に含まれたヘーズを除去する方法。 - 映像処理装置がヘーズが含まれた静止映像を修復する方法において、
(a)ヘーズが含まれた映像にてヘーズの明るさを測定する段階と、
(b)前記映像からコントラスト及び映像損失量による最終費用関数値に基づくブロック単位伝達量を推定し、前記ブロック単位伝達量を用いてピクセル単位伝達量を推定する段階と、
(c)前記ヘーズの明るさと前記ピクセル単位伝達量を用いて前記映像におけるヘーズを除去して映像を修復する段階と、
を含む静止映像に含まれたヘーズを除去する方法であって、
前記(b)段階は、
前記映像を予め定められた第2の一定個数のブロックに分割し、各ブロック別にコントラストと映像損失量による最終費用関数を用いてブロック単位伝達量を推定する段階と、
前記ブロック単位伝達量にエッジ保存フィルターを適用してピクセル単位伝達量に変換する段階と、
を含むことを特徴とする静止映像に含まれたヘーズを除去する方法。 - 前記ブロック単位伝達量を推定する段階は、
前記映像を予め定められた第2の一定個数に分割する段階と、
各ブロック毎に予め定められた範囲の伝達量を一定の比率ずつ変化させながらコントラストと映像損失量をそれぞれ求める段階と、
前記コントラストと映像損失量による最終費用関数を用いてブロック毎に最終費用関数値を求める段階と、
前記求められた最終費用関数値の中からその値を最小にする伝達量をブロック単位伝達量として検出する段階と、
を含むことを特徴とする請求項9に記載の静止映像に含まれたヘーズを除去する方法。 - 前記ブロック単位伝達量にエッジ保存フィルターを適用してピクセル単位伝達量に変換する段階は、
各ブロック毎に画素値の平均を求めて近似伝達量として定義する段階と、
前記ブロック単位伝達量と前記近似伝達量との差が最小となる変数値を求める段階と、
前記求められた変数値による近似伝達量をピクセル単位伝達量として推定する段階と、
を含むことを特徴とする請求項9に記載の静止映像に含まれたヘーズを除去する方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2012-0046710 | 2012-05-03 | ||
KR1020120046710A KR101582478B1 (ko) | 2012-05-03 | 2012-05-03 | 정지영상에 포함된 헤이즈 제거를 위한 영상 처리 장치 및 그 방법 |
PCT/KR2013/003855 WO2013165210A1 (ko) | 2012-05-03 | 2013-05-03 | 정지영상에 포함된 헤이즈 제거를 위한 영상 처리 장치 및 그 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015522860A JP2015522860A (ja) | 2015-08-06 |
JP5947456B2 true JP5947456B2 (ja) | 2016-07-06 |
Family
ID=49514550
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015510192A Active JP5947456B2 (ja) | 2012-05-03 | 2013-05-03 | 静止映像に含まれたヘーズを除去する映像処理装置及びその方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9336577B2 (ja) |
EP (1) | EP2846306B1 (ja) |
JP (1) | JP5947456B2 (ja) |
KR (1) | KR101582478B1 (ja) |
CN (1) | CN104272347B (ja) |
WO (1) | WO2013165210A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102182697B1 (ko) * | 2014-02-27 | 2020-11-25 | 한화테크윈 주식회사 | 영상 처리 장치 및 방법 |
KR101583430B1 (ko) * | 2014-09-30 | 2016-01-19 | 고려대학교 산학협력단 | 영상 처리 방법 및 장치 |
JP6579868B2 (ja) * | 2015-09-01 | 2019-09-25 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
CN105469372A (zh) * | 2015-12-30 | 2016-04-06 | 广西师范大学 | 一种基于均值滤波的雾天图像清晰化处理方法 |
JP6635799B2 (ja) * | 2016-01-20 | 2020-01-29 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US10269098B2 (en) * | 2016-11-01 | 2019-04-23 | Chun Ming Tsang | Systems and methods for removing haze in digital photos |
KR101867925B1 (ko) * | 2017-01-18 | 2018-06-15 | 국방기술품질원 | 정지영상에 포함된 헤이즈 제거를 위한 영상 처리 장치 및 그 방법 |
CN108259708B (zh) * | 2018-01-17 | 2020-05-12 | 国家安全生产监督管理总局通信信息中心 | 有雾视频处理方法及计算机可读存储介质 |
JP7421273B2 (ja) * | 2019-04-25 | 2024-01-24 | キヤノン株式会社 | 画像処理装置及びその制御方法及びプログラム |
CN110930326A (zh) * | 2019-11-15 | 2020-03-27 | 浙江大华技术股份有限公司 | 图像、视频去雾方法以及相关装置 |
CN117788461B (zh) * | 2024-02-23 | 2024-05-07 | 华中科技大学同济医学院附属同济医院 | 一种基于图像分析的磁共振图像质量评估系统 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100829581B1 (ko) * | 2006-11-28 | 2008-05-14 | 삼성전자주식회사 | 영상 처리 방법, 기록매체 및 장치 |
KR101446774B1 (ko) * | 2008-03-10 | 2014-10-01 | 삼성전자주식회사 | 디지털 영상 처리장치 및 그 제어방법 |
KR101518722B1 (ko) * | 2008-08-18 | 2015-05-15 | 삼성테크윈 주식회사 | 안개 등의 대기 산란 입자로 인한 왜곡 보정용 영상 처리 방법 및 장치 |
JP4807439B2 (ja) * | 2009-06-15 | 2011-11-02 | 株式会社デンソー | 霧画像復元装置及び運転支援システム |
KR101124878B1 (ko) * | 2010-04-28 | 2012-03-27 | 성균관대학교산학협력단 | 추정된 흐림반경에 기초한 영상보정방법 및 영상보정장치 |
JP5558240B2 (ja) * | 2010-07-20 | 2014-07-23 | 三菱電機株式会社 | 画像処理装置 |
JP5552956B2 (ja) * | 2010-08-12 | 2014-07-16 | 株式会社ニコン | 画像処理装置、画像処理方法およびプログラム |
US20120213436A1 (en) * | 2011-02-18 | 2012-08-23 | Hexagon Technology Center Gmbh | Fast Image Enhancement and Three-Dimensional Depth Calculation |
CN102254313B (zh) * | 2011-07-14 | 2012-09-19 | 浙江大学 | 基于雾天图像复原和图像融合的图像去雾方法 |
KR101582479B1 (ko) * | 2012-05-15 | 2016-01-19 | 에스케이 텔레콤주식회사 | 동영상에 포함된 헤이즈 제거를 위한 영상 처리 장치 및 그 방법 |
-
2012
- 2012-05-03 KR KR1020120046710A patent/KR101582478B1/ko active IP Right Grant
-
2013
- 2013-05-03 WO PCT/KR2013/003855 patent/WO2013165210A1/ko active Application Filing
- 2013-05-03 CN CN201380023359.4A patent/CN104272347B/zh active Active
- 2013-05-03 JP JP2015510192A patent/JP5947456B2/ja active Active
- 2013-05-03 EP EP13785237.2A patent/EP2846306B1/en active Active
-
2014
- 2014-11-03 US US14/531,067 patent/US9336577B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
KR20130123525A (ko) | 2013-11-13 |
CN104272347B (zh) | 2019-03-22 |
EP2846306A1 (en) | 2015-03-11 |
WO2013165210A1 (ko) | 2013-11-07 |
JP2015522860A (ja) | 2015-08-06 |
EP2846306A4 (en) | 2016-01-20 |
KR101582478B1 (ko) | 2016-01-19 |
CN104272347A (zh) | 2015-01-07 |
EP2846306B1 (en) | 2019-07-24 |
US9336577B2 (en) | 2016-05-10 |
US20150063719A1 (en) | 2015-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5947456B2 (ja) | 静止映像に含まれたヘーズを除去する映像処理装置及びその方法 | |
JP5865552B2 (ja) | 動画に含まれたヘーズを除去する映像処理装置及びその方法 | |
KR101518722B1 (ko) | 안개 등의 대기 산란 입자로 인한 왜곡 보정용 영상 처리 방법 및 장치 | |
US9135510B2 (en) | Method of processing sensor data for navigating a vehicle | |
WO2014055984A1 (en) | Imaging through aerosol obscurants | |
Halmaoui et al. | Contrast restoration of road images taken in foggy weather | |
John et al. | Enhancement of weather degraded video sequences using wavelet fusion | |
Khan et al. | Recent advancement in haze removal approaches | |
CN108876807B (zh) | 一种实时星载卫星图像运动对象检测跟踪方法 | |
Senthilkumar et al. | A review on haze removal techniques | |
Husain et al. | VRHAZE: The simulation of synthetic haze based on visibility range for dehazing method in single image | |
KR101867925B1 (ko) | 정지영상에 포함된 헤이즈 제거를 위한 영상 처리 장치 및 그 방법 | |
Negru et al. | Exponential image enhancement in daytime fog conditions | |
Esfahani et al. | Kinect depth recovery based on local filters and plane primitives | |
Chen et al. | A novel method for moving object detection in foggy day | |
Stojanović et al. | Improved dehazing techniques for maritime surveillance image enhancement | |
Shafina et al. | A single image haze removal method with improved airlight estimation using gradient thresholding | |
Pal et al. | Quality enhancement of foggy images comprising of large sky region on SAMEER TU dataset | |
Kim et al. | Image Dehazing from Depth Estimation using Convolutional Neural Networks | |
Kumari et al. | Fast and efficient contrast enhancement for real time video dehazing and defogging | |
Chen et al. | Research on safe distance measuring method of front vehicle in foggy environment | |
Raikwar et al. | An Enhanced Depth Approximation Model for Haze Removal Using Single Image | |
Stojanović et al. | Maritime surveillance image enhancement: a comparison and improvement of dehazing techniques | |
Aishwarya et al. | Real time haze removal using filter function | |
John et al. | Enhancement of weather degraded color images and video sequences using wavelet fusion |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160225 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160506 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160602 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5947456 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |