CN104182946A - 基于指数软硬择中阈值函数的光谱去噪方法 - Google Patents

基于指数软硬择中阈值函数的光谱去噪方法 Download PDF

Info

Publication number
CN104182946A
CN104182946A CN201410456371.0A CN201410456371A CN104182946A CN 104182946 A CN104182946 A CN 104182946A CN 201410456371 A CN201410456371 A CN 201410456371A CN 104182946 A CN104182946 A CN 104182946A
Authority
CN
China
Prior art keywords
wavelet
spectral
threshold function
hard
denoising
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410456371.0A
Other languages
English (en)
Inventor
高美凤
于力革
朱建鸿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangnan University
Original Assignee
Jiangnan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangnan University filed Critical Jiangnan University
Priority to CN201410456371.0A priority Critical patent/CN104182946A/zh
Publication of CN104182946A publication Critical patent/CN104182946A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明涉及一种基于指数软硬择中阈值函数的光谱去噪方法,主要实现对线阵CCD采集的光谱数据进行降噪处理。具体步骤为:对输入的含噪光谱信号进行多层小波分解;采用小波阈值对各层小波的高频系数进行收缩处理,其中小波阈值函数采用指数软硬择中阈值函数;对处理后的小波系数进行小波反变换,得到小波阈值法去噪后的光谱信号估计值;最后对光谱信号估计值进行中值滤波,进一步滤除光谱中的脉冲噪声。本发明在很好地保留光谱细节的前提下,减少去噪后光谱中的噪声残留,该发明可以用于CCD全谱直读光谱仪中的光谱预处理部分,实现对CCD采集的光谱信号进行去噪处理。

Description

基于指数软硬择中阈值函数的光谱去噪方法
技术领域
本发明属于图像处理技术领域,更进一步涉及基于指数软硬择中阈值函数的光谱去噪方法,可作为用于CCD全谱直读光谱仪采集的光谱数据的降噪处理。
背景技术
全谱直读光谱仪是钢铁行业的主要分析检测校准仪器。根据光谱检测器件的不同,目前市场上的全谱直读光谱仪主要有两种:基于光电倍增管(PMT)和基于电荷耦合器件(Charge-coupled Device,CCD)。其中基于CCD的全谱直读光谱仪具有体积小,重量轻,功耗低,使用方便,单次采集光谱范围宽,响应速度快,灵敏度高,数据采集处理快捷方便等特点。因此,采用线阵CCD实现全谱直读光谱分析仪是一个发展趋势。在光谱数据的定量分析中,噪声的存在往往会影响分析结果的准确性,为了提高光谱数据的分析精度,对线阵CCD采集的光谱数据进行降噪处理是十分必要。
根据图像光谱的特点和噪声的统计特性,发展了各种各样的去噪方法。常用的去噪算法有很多种,比如均值滤波、平滑滤波、窗函数法、自适应中值滤波、中值滤波和小波变换滤波。尽管去噪方法多种多样,但降噪研究的工作都是在去噪和保留高频信息之间进行权衡。总体来说减少信号噪声的方法可以在信号空间域和在信号变换域内完成。在全谱直读光谱仪中,线阵CCD采集到的光谱数据含有以下噪声:由杂散光引起的低频背景噪声和由暗电流噪声、转移噪声所组成的高频噪声。这些噪声在光谱图上会形成波动和毛刺,对光谱的峰值位置和波峰的高度会产生一定的影响。根据CCD采集到的光谱特性以及各种去噪方法的特点,采用小波阈值和中值滤波相结合的方法对含噪光谱数据进行处理。
经过小波分解,信号的能量主要分布在低分辨的尺度函数上,而噪声的能量分布不变,仍然均匀分布在所有小波系数上。基于此特性,小波阈值去噪方法就是保留或收缩大的小波系数(低频系数),剔除小的小波系数(高频系数)。在使用小波阈值法对光谱数据进行去噪处理时,选取不同的阈值函数反映了对小波稀疏模的不同处理策略,通常阈值函数采用Donoho等在文章“Ideal Spatial Adaptation by Wavelet Shrinkage”(Biometrika,Vol.81,No.3,pp.425-455,1994)提出的硬阈值函数(Hard Threshold Function)和软阈值函数(Soft ThresholdFunction)两种。其中硬阈值函数对于信号的细节特征可以很好地保留,但在阈值±T处不连续,且不可导,同时其剔除了小于阈值的小波系数,不加处理的完全保留了大于阈值的小波系数,因此重构信号容易产生较大的均方差,出现振荡;软阈值函数在阈值±T处是连续的,可以避免去噪后的信号产生振荡现象,但估计的小波系数与实际信号的小波系数之间存在恒定的偏差,使得重构的信号过度平滑,使得边缘相对模糊,同样影响去噪效果。
发明内容
本发明针对上述现有的阈值函数的缺陷,提出了一种指数软硬择中阈值函数,对光谱信号进行去噪处理,以减少了降噪后光谱信号的噪声残留,提高了光谱信号的信噪比。
为了实现上述目标,本发明包括以下步骤:
步骤1:对输入的含噪光谱信号进行多层小波变换。采用db4小波对含噪光谱信号进行5层分解,分别得到小波的低频系数和高频系数;
步骤2:对步骤1得到的各层高频小波系数进行收缩处理。在收缩处理中阈值函数采用了本发明所提出的指数软硬择中阈值函数,即
&omega; ^ jk = sgn ( &omega; jk ) [ | &omega; jk | - T j e - | &omega; jk | T j ] | &omega; jk | &GreaterEqual; T j 0 | &omega; jk | < T j
其中,Tj为阈值,ωjk为第j层的小波系数,为阈值收缩后的小波系数,j为小波分解的层数,k则表示第k个小波系数。
阈值Tj采用了分层阈值对各层的小波高频系数进行收缩处理,分层阈值为
T j = &sigma; j 2 ln ( N j )
其中,Nj为小波分解第j层小波系数的长度,为第j层噪声的标准差,{ωjk}为第j层小波系数。
步骤3:小波反变换获得小波去噪后的信号估计。利用步骤1得到的小波低频系数和步骤2经过小波阈值处理的高频系数进行小波反变换,获得小波分层去噪后的信号估计值。
步骤4:信号中值滤波处理。为了有效去除含噪光谱中的脉冲干扰,对步骤3所得到的信号估计值,进一步进行中值滤波。
该指数软硬择中阈值函数与传统的阈值函数相比有以下优点:
(1)当|ωjk|≥Tj时,指数软硬择中阈值函数具有高阶导函数;
(2)函数的渐进方程是:克服了单纯软阈值函数估计出来的具有恒定偏差Tj(|ωjk|≥Tj)的局限,从而可以更好地、更完整地保留光谱信号的峰值点。
附图说明
图1为本发明的流程图;
图2为本发明使用的测试光谱信号;
图3为通过本发明去噪后的光谱信号与原始光谱信号的对比。
具体实施方式
下面结合附图,对本方明具体实现及效果作进一步详细说明。
参照图1,本发明实现的步骤如下:
步骤1,输入一组待去噪的光谱信号:x=s+n,其中s为原始光谱信号;n为噪声,其包含高斯白噪声和脉冲噪声。
步骤2,采用db4小波对含噪光谱信号x进行5层分解,分别得到高低频小波系数ωjk,其中,j为小波分解的层数,k则表示第k个小波系数。
步骤3,采用指数软硬择中阈值函数,对各层的高频小波系数进行收缩处理。指数软硬择中阈值函数为
&omega; ^ jk = sgn ( &omega; jk ) [ | &omega; jk | - T j e - | &omega; jk | T j ] | &omega; jk | &GreaterEqual; T j 0 | &omega; jk | < T j
其中,Tj为阈值,ωjk为小波系数,为阈值收缩后的小波系数。
在这里阈值Tj选用了分层阈值,即
T j = &sigma; j 2 ln ( N j )
其中,Nj为小波分解第j层小波系数的长度,为第j层噪声的标准差,{ωjk}为第j层小波系数。
步骤4,利用步骤2得到的低频小波系数和步骤3经过小波阈值处理的高频小波系数进行小波反变换,获得小波分层去噪后的信号估计值x′。
步骤5,对步骤4得到的信号估计值x′进行中值滤波,进一步去除脉冲噪声的影响。中值滤波器为
median ( x i &prime; ) = x k + 1 &prime; , n = 2 k + 1 1 2 ( x k &prime; + x k + 1 &prime; ) , n = 2 k
综合以上步骤,含噪光谱信号x经过小波阈值降噪和中值滤波后,得到了降噪后的信号 x ^ = median [ Wavelet ( x ) ] .
下面结合仿真实验的结果来进一步说明本发明的效果。
一、实验图像
实验所使用的测试信号为线阵CCDILX554B采集的光谱数据,如图2所示。其中图2(a)为原始光谱图像,图2(b)为含有高斯白噪声和脉冲噪声的光谱图像。
二、实验评价指标
对于含噪光谱信号去噪效果的评价,可以采用主观评价和客观评价两个方面。主观评价主要是通过人眼观察,查看光谱图像的峰值位置和峰值高度基本不变,且噪声去除的很干净,则说明该去噪方法效果好,反之则效果较差。图3为经过基于指数软硬择中阈值函数的光谱去噪后光谱图像的效果图,从图3可以看出,采用本发明的指数软硬择中阈值函数进行组合滤波去噪,去噪后光谱图像的峰值和峰值位置几乎与原始光谱图像一致,这从主观上说明了本发明达到了光谱信号去噪的效果。
客观评价采用去噪前后光谱信号的信噪比(Signal-to-Noise Radio,SNR)以及均方误差(Mean Square Error,MSE)来进行衡量。令光谱信号为x,经过小波阈值去噪和中值滤波后的光谱信号为则去噪后的光谱信号信噪比为
SNR = 10 &CenterDot; lg [ &Sigma; i = 0 N - 1 ( x i - x &OverBar; i ) 2 &Sigma; i = 0 N - 1 ( x ^ i - x i ) 2 ]
其中, x &OverBar; i = 1 N &Sigma; i = 0 N - 1 x i .
均方误差为
MSE = 1 N &Sigma; i = 0 N - 1 ( x ^ i - x i ) 2
其中,i为光谱数据的序号,i=0,2,3…,N-1。
三、实验结果和分析
为了说明本发明的性能,采用本发明中的去噪步骤:小波阈值去噪+中值滤波的去噪方法。同时在小波阈值去噪中,阈值函数分别取本发明的基于指数软硬择中阈值函数、软阈值函数和硬阈值函数,最后进行信噪比和均方误差的比较。得到表1的对比结果。
表1取不同阈值函数时SNR和MSE的对比
阈值函数 含噪信号 软阈值函数 硬阈值函数 本发明
SNR/dB 22.94 34.57 34.24 34.59
MSE 0.0028 7.35×10-4 7.64×10-4 7.34×10-4
由表1得知:采用本发明处理后的光谱信号信噪比比含噪光谱信号提高了50.78%,比软阈值和硬阈值法分别高出0.02dB和0.35dB;另外,本发明的均方误差为7.34×10-4,比软阈值法降低了0.14%,比硬阈值法的均方误差降低了4.09%。
上面结合附图和表格对本发明进行了示例性的描述。显然,本发明的实现并不受上述方式的限制,只要采用了本发明的方法构思和技术方案进行的各种改进,或未经改进将本发明的构思和技术方案直接应用于其它场合的,均在本发明的保护范围内。

Claims (2)

1.一种基于指数软硬择中阈值函数的光谱去噪方法,包括以下步骤:
步骤1:对输入的含噪光谱信号进行多层小波变换。采用db4小波对含噪光谱信号进行5层分解,分别得到小波的低频系数和高频系数。
步骤2:利用本发明所提出的指数软硬择中阈值函数对步骤1得到的小波系数进行收缩处理。
步骤3:小波反变换获得小波去噪后的信号估计。利用步骤1得到的小波低频系数和步骤2经过小波阈值处理的高频系数进行小波反变换,获得小波分层去噪后的信号估计值。
步骤4:信号中值滤波处理。为了有效去除含噪光谱中的脉冲干扰,对步骤3所得到的信号估计值,进一步进行中值滤波。
2.根据权利要求1所述的方法,其特征在于:步骤2中所述的阈值函数采用了指数软硬择中阈值函数,其表达式如下:
&omega; ^ jk = sgn ( &omega; jk ) [ | &omega; jk | - T j e - | &omega; jk | T j ] | &omega; jk | &GreaterEqual; T j 0 | &omega; jk | < T j
其中,Tj为阈值,ωjk为第j层的小波系数,为阈值收缩后的小波系数,j为小波分解的层数,k则表示第k个小波系数。
随着|ωjk|的增大,该指数软硬择中阈值函数所估计出来的渐进于ωjk,因此该阈值函数克服了单纯软阈值函数估计出来的具有恒定偏差Tj(|ωjk|≥Tj)的局限。
CN201410456371.0A 2014-09-09 2014-09-09 基于指数软硬择中阈值函数的光谱去噪方法 Pending CN104182946A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410456371.0A CN104182946A (zh) 2014-09-09 2014-09-09 基于指数软硬择中阈值函数的光谱去噪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410456371.0A CN104182946A (zh) 2014-09-09 2014-09-09 基于指数软硬择中阈值函数的光谱去噪方法

Publications (1)

Publication Number Publication Date
CN104182946A true CN104182946A (zh) 2014-12-03

Family

ID=51963965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410456371.0A Pending CN104182946A (zh) 2014-09-09 2014-09-09 基于指数软硬择中阈值函数的光谱去噪方法

Country Status (1)

Country Link
CN (1) CN104182946A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105137373A (zh) * 2015-07-23 2015-12-09 厦门大学 一种指数信号的去噪方法
CN105738948A (zh) * 2016-02-24 2016-07-06 重庆地质矿产研究院 一种基于小波变换的微地震数据降噪方法
CN106023150A (zh) * 2016-05-09 2016-10-12 重庆大学 一种针对数字全息图噪声干扰的实时客观质量评价方法
CN106952361A (zh) * 2017-03-15 2017-07-14 深圳汇通智能化科技有限公司 一种高效的车辆行驶状态识别系统
CN109813660A (zh) * 2018-12-25 2019-05-28 核工业北京地质研究院 一种分段式的矿物光谱噪声处理方法
CN111198167A (zh) * 2020-01-06 2020-05-26 邵阳学院 一种溶液金属离子浓度检测方法、终端设备及存储介质
CN111493821A (zh) * 2020-03-16 2020-08-07 浙江好络维医疗技术有限公司 一种基于modwt及中值滤波的ppg信号实时去噪方法
CN113324918A (zh) * 2021-01-26 2021-08-31 核工业北京地质研究院 一种岩石光谱去噪方法
CN114577419A (zh) * 2022-04-24 2022-06-03 南京信息工程大学 一种提高地下连续墙渗漏安全监测有效性方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8412468B1 (en) * 2009-04-08 2013-04-02 Western Kentucky University Method and apparatus for wavelet based elemental spectrum analysis
CN103217409A (zh) * 2013-03-22 2013-07-24 重庆绿色智能技术研究院 一种拉曼光谱预处理方法
AU2013100970A4 (en) * 2013-07-18 2013-08-22 Finisar Corporation Systems and methods for performing spectral analysis
CN103543132A (zh) * 2013-10-17 2014-01-29 清华大学 一种基于小波变换的煤质特性测量方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8412468B1 (en) * 2009-04-08 2013-04-02 Western Kentucky University Method and apparatus for wavelet based elemental spectrum analysis
CN103217409A (zh) * 2013-03-22 2013-07-24 重庆绿色智能技术研究院 一种拉曼光谱预处理方法
AU2013100970A4 (en) * 2013-07-18 2013-08-22 Finisar Corporation Systems and methods for performing spectral analysis
CN103543132A (zh) * 2013-10-17 2014-01-29 清华大学 一种基于小波变换的煤质特性测量方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
卢明波 等: "基于一种改进的小波阈值图像去噪算法", 《呼伦贝尔学院学报》 *
王晓彬: "多菌灵农药激光拉曼光谱的小波去噪方法研究", 《食品工业科技》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105137373B (zh) * 2015-07-23 2017-12-08 厦门大学 一种指数信号的去噪方法
CN105137373A (zh) * 2015-07-23 2015-12-09 厦门大学 一种指数信号的去噪方法
CN105738948A (zh) * 2016-02-24 2016-07-06 重庆地质矿产研究院 一种基于小波变换的微地震数据降噪方法
CN105738948B (zh) * 2016-02-24 2018-03-23 重庆地质矿产研究院 一种基于小波变换的微地震数据降噪方法
CN106023150A (zh) * 2016-05-09 2016-10-12 重庆大学 一种针对数字全息图噪声干扰的实时客观质量评价方法
CN106952361B (zh) * 2017-03-15 2019-07-23 上海工业控制安全创新科技有限公司 一种高效的车辆行驶状态识别系统
CN106952361A (zh) * 2017-03-15 2017-07-14 深圳汇通智能化科技有限公司 一种高效的车辆行驶状态识别系统
CN109813660A (zh) * 2018-12-25 2019-05-28 核工业北京地质研究院 一种分段式的矿物光谱噪声处理方法
CN111198167A (zh) * 2020-01-06 2020-05-26 邵阳学院 一种溶液金属离子浓度检测方法、终端设备及存储介质
CN111198167B (zh) * 2020-01-06 2022-12-13 邵阳学院 一种溶液金属离子浓度检测方法、终端设备及存储介质
CN111493821A (zh) * 2020-03-16 2020-08-07 浙江好络维医疗技术有限公司 一种基于modwt及中值滤波的ppg信号实时去噪方法
CN111493821B (zh) * 2020-03-16 2023-03-14 浙江好络维医疗技术有限公司 一种基于modwt及中值滤波的ppg信号实时去噪方法
CN113324918A (zh) * 2021-01-26 2021-08-31 核工业北京地质研究院 一种岩石光谱去噪方法
CN113324918B (zh) * 2021-01-26 2023-01-24 核工业北京地质研究院 一种岩石光谱去噪方法
CN114577419A (zh) * 2022-04-24 2022-06-03 南京信息工程大学 一种提高地下连续墙渗漏安全监测有效性方法

Similar Documents

Publication Publication Date Title
CN104182946A (zh) 基于指数软硬择中阈值函数的光谱去噪方法
CN109469837B (zh) 基于vmd-pse的压力管道多点泄漏定位方法
CN101739671B (zh) 一种含噪图像的降噪处理方法及系统
CN102930149B (zh) 基于pca和emd的传感器网络感知信息去噪处理方法
CN102663695B (zh) 基于小波变换的dr图像去噪方法及系统
CN112861740B (zh) 基于复合评价指标和小波熵的小波阈值去噪参数选取方法
CN113378661A (zh) 一种基于改进小波阈值和相关检测的直流电能信号去噪方法
CN112287796B (zh) 基于VMD-Teager能量算子的辐射源识别方法
CN105205788A (zh) 一种针对高通量基因测序图像的去噪方法
CN103995950A (zh) 基于空域相关修正阈值的变小波系数局部放电信号消噪方法
Bhandari et al. Comparative analysis of different wavelet filters for low contrast and brightness enhancement of multispectral remote sensing images
CN112084845B (zh) 基于多尺度小波系数自相关的低频1/f噪声消除方法
CN109813660A (zh) 一种分段式的矿物光谱噪声处理方法
CN111650654A (zh) 联合emd与wt算法的地面磁共振信号尖峰噪声剔除方法
CN109724693B (zh) 一种基于平稳小波的融合光谱去噪方法
CN103077507A (zh) 基于Beta算法的多尺度SAR图像降噪方法
CN106296602A (zh) 一种三维小波变换的极化sar滤波方法
CN110032968B (zh) 基于双树复小波和自适应半软阈值法的去噪方法
CN106301755B (zh) 一种基于小波分析的能量泄漏信号的降噪方法及系统
CN105096274B (zh) 基于非下采样轮廓波域混合统计模型的红外图像降噪方法
CN113095113A (zh) 一种用于水下目标识别的小波线谱特征提取方法及系统
CN110287853A (zh) 一种基于小波分解的暂态信号去噪方法
CN102509268B (zh) 基于免疫克隆选择的非下采样轮廓波域图像去噪方法
CN107609530A (zh) 一种随钻方位电磁波电阻率成像特征提取方法
Chen et al. Research on sonar image denoising method based on fixed water area noise model

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20141203