CN114627011A - 改进双边滤波与多帧平均联合的红外序列图像降噪方法 - Google Patents
改进双边滤波与多帧平均联合的红外序列图像降噪方法 Download PDFInfo
- Publication number
- CN114627011A CN114627011A CN202210218185.8A CN202210218185A CN114627011A CN 114627011 A CN114627011 A CN 114627011A CN 202210218185 A CN202210218185 A CN 202210218185A CN 114627011 A CN114627011 A CN 114627011A
- Authority
- CN
- China
- Prior art keywords
- image
- noise
- correction
- filtering
- frame averaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001914 filtration Methods 0.000 title claims abstract description 76
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000002146 bilateral effect Effects 0.000 title claims abstract description 55
- 238000012935 Averaging Methods 0.000 title claims abstract description 28
- 230000009467 reduction Effects 0.000 title claims abstract description 4
- 238000012937 correction Methods 0.000 claims abstract description 70
- 239000000758 substrate Substances 0.000 claims abstract description 7
- 238000012545 processing Methods 0.000 claims description 36
- 230000004044 response Effects 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 9
- 239000000126 substance Substances 0.000 claims description 8
- 230000000694 effects Effects 0.000 claims description 7
- 238000003331 infrared imaging Methods 0.000 claims description 7
- 230000005855 radiation Effects 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 230000007613 environmental effect Effects 0.000 claims description 4
- 238000009499 grossing Methods 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 4
- 230000004888 barrier function Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002401 inhibitory effect Effects 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000005057 refrigeration Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Images
Classifications
-
- G06T5/70—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
- G06T2207/20028—Bilateral filtering
Abstract
本发明公开了一种改进双边滤波与多帧平均联合的红外序列图像降噪方法,其方法实现步骤顺序为:(1)输入非制冷红外探测器采集数据;(2)挡片校正去除基底固有的横竖条纹和其他固有噪声;(3)两点校正实现图像非均匀性校正;(4)改进的双边滤波器去除动态随机噪声;(5)对连续的5帧图像集进行多帧平均进一步去除随机噪声。本发明解决了传统红外序列图像去除条纹噪声方法存在细节模糊和边缘结构信息丢失的严重问题。不仅能有效地降低噪声,特别是条纹噪声,而且能较好地保留图像的边缘结构信息。
Description
技术领域
本发明属于图像处理领域,涉及图像处理技术,特别属于红外图像处理领域,涉及红外序列图像去噪技术,具体为一种改进双边滤波与多帧平均联合的红外序列图像降噪方法。
背景技术
目前典型的图像传感器包括CCD和CMOS等类型,基于图像传感器成像系统采集图像时,除了器件本身的缺陷产生噪声外,在图像采集过程中,驱动电路、数值化等图像信号处理和传输等内部,以及外部环境等影响的过程都会产生噪声,使得采集到的图像包含噪声。随机噪声广泛存在于数字图像的采集、编码、传输和处理过程中。图像去噪是图像处理中预处理的基本内容之一,属于低级处理。图像去噪的目的是减少图像中噪声,提高图像信噪比,改善图像质量,便于后续处理或提高图像显示效果。
红外热成像系统由于受到红外探测器材料自身缺陷以及环境干扰等影响,无论是成像系统外的环境,还是系统内的物理参数都会给红外图像带来干扰,红外图像存在的噪声多种多样非常复杂。比如随机闪烁的粒子噪声和固定图案噪声,红外图像噪声来源多样化造成红外图像噪声的不可预测性。图像噪声有各种分类方法,其中可以分成固定噪声和随机噪声两大类型。条纹噪声是红外图像中的一种噪声类型,既包括固定条纹噪声,也包括随机条纹噪声。对于红外成像系统,红外图像噪声成为影响图像质量的主要因素之一,图像去噪成为红外成像系统图像处理的核心技术。
现有图像去噪处理技术中,由于随机噪声具有较宽的频谱,当使用低通滤波器进行平滑时,图像中的高频信息必然会丢失。同时传统的均值滤波、中值滤波、高斯滤波及维纳滤波等算法对于图像不同噪声的处理存在一定的依赖性,去噪后的图像边缘存在模糊现象。
双边滤波噪声抑制算法因具有良好的边缘保持效果,被广泛用于图像分析处理中。双边滤波在空间欧式距离的基础上,结合当前点与其领域点的亮度相似性,对亮度距离和空间距离进行加权平均。该算法可以区分匀质平坦区域和边缘结构区域,从而在不同的区域结构进行不同程度的滤波,起到对图像边缘结构的保护作用,具有较强的适用性。有很多双边滤波的改进算法,例如提出二次迭代滤波概念,即用第一次双边滤波的结果指导第二次双边滤波;提出结合中值滤波思想的双边滤波;提出对双边滤波中的参数优化选择处理而达到对双边滤波的改进;提出结合双边和多帧均值滤波对图像去噪,在去除随机噪声有一定提升。然而,对于实际应用,现有一些改进的双边滤波器,经处理后的图像常常出现“卡通”效应,滤波器在保护图像中锐利边沿的同时,在边缘定义的区域内,所有精细的细节变得模糊。同时传统的均值滤波,中值滤波,高斯滤波,维纳滤波等算法对于图像不同噪声的处理存在一定的依赖性,去噪后的图像边缘存在模糊现象。经典的双边滤器以二维方式实现和浮点型空间邻近度因子,计算量较大。
发明内容
为了克服现有图像去噪技术的不足,解决传统红外序列图像去噪方法存在细节模糊和边缘结构信息丢失严重的问题,本发明提出一种改进双边滤波与多帧平均的联合红外序列图像去噪方法,解决了传统红外序列图像去除条纹噪声方法存在细节模糊和边缘结构信息丢失的严重问题。
其方法实现步骤顺序为:(1)输入非制冷红外探测器采集数据;(2)挡片校正去除基底固有的横竖条纹和其他固有噪声;(3)两点校正实现图像非均匀性校正;(4)改进的双边滤波器去除动态随机噪声;(5)对连续的5帧图像集进行多帧平均进一步去除随机噪声。
进一步,步骤(2)中:挡片校正去除基底固有的横竖条纹和其他固有噪声;挡片校正主要校正背景电平和响应率,校正背景电平,设在某个环境工作温度和均匀背景辐射条件下,采集得到第探测器单元的原始输出值为,则校正过程如下:
校正响应率过程如下:
进一步,步骤(3)中:两点校正实现图像非均匀性校正;
在步骤(2)的基础上再去除条纹噪声,两点校正前红外成像系统的输出方程为:
由以上两式得:
进一步,步骤(4)中:改进的双边滤波器去除动态随机噪声;
通过步骤(2)和步骤(3)处理后去除了大部分的噪声,接下来采用改进的双边滤波处理,进一步去除噪声;
和
因此,
和
先对噪声图像进行水平方向上的一维滤波,再对水平滤波结果进行垂直方向上一维滤波。
进一步,步骤(5)中:多帧平均进一步去除随机噪声;
步骤(4)滤波处理后还有部分随机噪声的存在,在采用多帧平均进一步去除噪声,多帧平均过程如下:
本发明对比现有技术有如下的有益效果:
(1)克服传统红外序列图像去除条纹噪声方法存在细节模糊和边缘结构信息丢失的严重问题。
(2)本发明所提出的去噪方法不仅能有效地降低噪声,特别是条纹噪声,而且能较好地保留图像的边缘结构信息。
(3)本文提出的去噪方法,在提升处理效率的同时,能够降低领域像素值的干扰,更有针对性的去除噪声,由于噪声的随机性,再联合多帧平均处理,能够更好的去除噪声,得到高质量的红外序列图像。
综合双边滤波的优点和缺点,本发明提出了改进双边滤波,传统的双边滤波器采用二维方式和浮点空间邻近因子实现,计算量较大,且卷积核区域覆盖了其他区域的灰度值,对需要处理的像素点有较多干扰,影响最后的处理结果。本发明设计了一种改进的双边滤波器,该滤波器设计了一个整数空间接近因子,通过水平和垂直方向的一维滤波实现,一方面提升了计算效率,另一方面,针对性的对每一列或每一行像素值进行处理,不会受到领域其他像素的干扰。
另外,基于视频图像和随机噪声的特点,多图像平均方法去噪能在有效去噪的同时增强有用信息。
最后,最终图像表明,本发明提出的方法在抑制红外序列图像噪声的同时能更好地保持图像的边缘结构信息和提升清晰度。
附图说明
图1为本发明实施例提供的红外序列图像去噪算法流程图;
图2(a)为黑体不使用挡片校正时的图像;
图2(b)为黑体使用挡片校正后的图像;
图3为黑体两点校正过程;
图4为黑体两点校正后的图像;
图5(a)为场景两点校正后的原始图像;
图5(b)为场景两点校正后再均值滤波处理后的图像;
图5(c)为场景两点校正后再高斯滤波处理后的图像;
图5(d)为场景两点校正后再维纳滤波处理后的图像;
图5(e)为场景两点校正后再中值滤波处理后的图像;
图5(f)为场景两点校正后再传统双边滤波处理后的图像;
图5(g)为场景两点校正后再改进双边滤波处理后的图像;
图5(h)为场景两点校正后再改进双边滤波联合多帧平均处理后的最终图像。
具体实施方式
下面结合附图,通过具体实施例,对本发明的技术方案进行清楚,完整的描述。
本发明提出一种改进双边滤波与多帧平均的联合红外序列图像去噪方法,解决了传统红外序列图像去除条纹噪声方法存在细节模糊和边缘结构信息丢失的严重问题。
其方法实现步骤顺序为:(1)输入非制冷红外探测器采集数据;(2)挡片校正去除基底固有的横竖条纹和其他固有噪声;(3)两点校正实现图像非均匀性校正;(4)改进的双边滤波器去除动态随机噪声;(5)对连续的5帧图像集进行多帧平均进一步去除随机噪声。
进一步,步骤(2)中:挡片校正去除基底固有的横竖条纹和其他固有噪声;挡片校正主要校正背景电平和响应率,校正背景电平,设在某个环境工作温度和均匀背景辐射条件下,采集得到第探测器单元的原始输出值为,则校正过程如下:
校正响应率过程如下:
进一步,步骤(3)中:两点校正实现图像非均匀性校正;
在步骤(2)的基础上再去除条纹噪声,两点校正前红外成像系统的输出方程为:
由以上两式得:
进一步,步骤(4)中:改进的双边滤波器去除动态随机噪声;
通过步骤(2)和步骤(3)处理后去除了大部分的噪声,接下来采用改进的双边滤波处理,进一步去除噪声;
和
因此,
和
先对噪声图像进行水平方向上的一维滤波,再对水平滤波结果进行垂直方向上一维滤波。
进一步,步骤(5)中:多帧平均进一步去除随机噪声;
步骤(4)滤波处理后还有部分随机噪声的存在,在采用多帧平均进一步去除噪声,多帧平均过程如下:
实施例
本发明的流程图如图1所示。
图2(a)是探测器采集到的最原始数据,没有经过任何处理的图像,有很多明显的条纹噪声。图2(b)是经过挡片校正处理后的图像,由于机芯工作一段时间后会出现明显的噪声,所以机芯工作一段时间后需要挡片校正一次。
图3是黑体两点校正参数的过程。图3(a)是红外探测器上两个不同的像元A和B的输出电信号强度与红外辐射强度的响应曲线,可以看出它们的偏置(纵轴截距)和增益(斜率)都不相同,在相同的辐射强度下输出的电信号强度也不同。而图中的S表示最终找到校正的结果响应曲线,为了使A、B两像元的响应曲线与S重合,首先平移A、B的曲线使两者在纵轴上的截距与S相同,再改变其斜率,使两者与S重合,则完成了校正过程。
图4是获得校正参数后,对挡片校正后的图像再两点校正的过程。
图5(a)是选取的室外一个实际实施场景,是经过挡片校正及两点校正后的图像,存在大量的横条纹。后面实施处理的图像都是基于此实施场景经过挡片校正再经过两点校正处理的图像进行实施处理。
图5(b)是经过均值滤波处理后的图像,图5(c)是经过高斯滤波处理后的图像,图5(d)是经过维纳滤波处理后的图像,图5(e)是经过中值滤波处理后的图像,这几种滤波窗口尺寸选取都为,滤波后噪声有一定程度上的降低,但物体边缘变得模糊,丢失了很多细节信息,清晰度低。
图5(g)为改进双边滤波处理后的图像,其中空间距离参数,颜色差值范围参数,滤波窗口尺寸选取行方向上为,列方向上为。在提升处理速率的同时,噪声能够更好的去除,图像边缘结构信息保护得较好,但随机噪声依然明显存在。
图5(h)为改进双边滤波联合多帧平均处理后的最终图像,其中空间距离参数,颜色差值范围参数,滤波窗口尺寸选取行方向上为,列方向上为,先进行方向处理再进列方向处理。改进双边滤波处理后,采集同一场景下,连续的5帧图像作为一组图像集,联合多帧平均处理,对每一帧相同位置像素值先相加后求均值,得到最终的去噪图像。
最后,最终图像表明,本发明提出的方法在抑制红外序列图像噪声的同时能更好地保持图像的边缘结构信息和提升清晰度。
Claims (5)
1.一种改进双边滤波与多帧平均联合的红外序列图像降噪方法,其特征在于,其方法实现步骤顺序为:(1)输入非制冷红外探测器采集数据;(2)挡片校正去除基底固有的横竖条纹和其他固有噪声;(3)两点校正实现图像非均匀性校正;(4)改进的双边滤波器去除动态随机噪声;(5)对连续的5帧图像集进行多帧平均进一步去除随机噪声。
3.如权利要求1所述的改进双边滤波与多帧平均联合的红外序列图像降噪方法,其特征在于,步骤(3)中:两点校正实现图像非均匀性校正;
在步骤(2)的基础上再去除条纹噪声,两点校正前红外成像系统的输出方程为:
由以上两式得:
4.如权利要求1所述的改进双边滤波与多帧平均联合的红外序列图像降噪方法,其特征在于,步骤(4)中:改进的双边滤波器去除动态随机噪声;
通过步骤(2)和步骤(3)处理后去除了大部分的噪声,接下来采用改进的双边滤波处理,进一步去除噪声;
和
因此,
和
先对噪声图像进行水平方向上的一维滤波,再对水平滤波结果进行垂直方向上一维滤波。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210218185.8A CN114627011A (zh) | 2022-03-08 | 2022-03-08 | 改进双边滤波与多帧平均联合的红外序列图像降噪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210218185.8A CN114627011A (zh) | 2022-03-08 | 2022-03-08 | 改进双边滤波与多帧平均联合的红外序列图像降噪方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114627011A true CN114627011A (zh) | 2022-06-14 |
Family
ID=81899748
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210218185.8A Pending CN114627011A (zh) | 2022-03-08 | 2022-03-08 | 改进双边滤波与多帧平均联合的红外序列图像降噪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114627011A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115375590A (zh) * | 2022-10-27 | 2022-11-22 | 之江实验室 | 一种亮度非均匀性在线补偿的图像处理方法 |
CN117372285A (zh) * | 2023-12-05 | 2024-01-09 | 成都市晶林科技有限公司 | 一种静态和动态区域区分的时域高通滤波方法及系统 |
-
2022
- 2022-03-08 CN CN202210218185.8A patent/CN114627011A/zh active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115375590A (zh) * | 2022-10-27 | 2022-11-22 | 之江实验室 | 一种亮度非均匀性在线补偿的图像处理方法 |
CN117372285A (zh) * | 2023-12-05 | 2024-01-09 | 成都市晶林科技有限公司 | 一种静态和动态区域区分的时域高通滤波方法及系统 |
CN117372285B (zh) * | 2023-12-05 | 2024-02-20 | 成都市晶林科技有限公司 | 一种静态和动态区域区分的时域高通滤波方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Ramesh et al. | THE MANAGEMENT AND REDUCTION OF DIGITAL NOISE IN VIDEO IMAGE PROCESSING BY USING TRANSMISSION BASED NOISE ELIMINATION SCHEME. | |
US8744206B2 (en) | Image processing apparatus, image processing method, and program | |
CN110211056B (zh) | 基于局部中值直方图的自适应红外图像去条纹算法 | |
EP1315367B1 (en) | Method and system for improving color images | |
CN114627011A (zh) | 改进双边滤波与多帧平均联合的红外序列图像降噪方法 | |
CN111986120A (zh) | 一种基于帧累加和多尺度Retinex的低光照图像增强优化方法 | |
US10148926B2 (en) | Imaging apparatus and image processing method of thereof | |
US7176983B2 (en) | Adaptive coring for video peaking | |
CN110730336B (zh) | 一种去马赛克方法及装置 | |
EP2147406A2 (en) | Techniques for adjusting the effect of applying kernels to signals to achieve desired effect on signals | |
CN107240081A (zh) | 夜景影像去噪与增强处理方法 | |
CN115082361B (zh) | 基于图像处理的浑浊水体图像增强方法 | |
CN110047055B (zh) | 一种红外图像细节增强及去噪方法 | |
CN112561804A (zh) | 基于多尺度细节增强的低光照水下图像增强方法 | |
TR201810171T4 (tr) | Bir girdi görüntüsündeki halka şeklinde artefaktları en aza indirmek için yöntem ve aparat. | |
CN110517206B (zh) | 彩色摩尔纹消除方法及装置 | |
US9240035B2 (en) | Methods for reducing row and column patterns in a digital image | |
US7269295B2 (en) | Digital image processing methods, digital image devices, and articles of manufacture | |
US7430334B2 (en) | Digital imaging systems, articles of manufacture, and digital image processing methods | |
CN115965552A (zh) | 用于低信噪比图像序列的频空时域联合去噪与恢复系统 | |
CN113840124B (zh) | 图像处理方法及系统 | |
CN114519676A (zh) | 基于Bayer格式的raw图像的去噪装置及方法 | |
CN111652820A (zh) | 校正红外图像条纹非均匀性的方法、装置与图像处理系统 | |
JP2010039832A (ja) | 画像処理装置および画像処理プログラム | |
CN111289848B (zh) | 一种应用在基于安全生产的智能型热局放仪的复合数据滤波方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |