CN112666097B - 一种傅里叶红外多项式迭代平滑滤波基线校正方法 - Google Patents

一种傅里叶红外多项式迭代平滑滤波基线校正方法 Download PDF

Info

Publication number
CN112666097B
CN112666097B CN202011627636.0A CN202011627636A CN112666097B CN 112666097 B CN112666097 B CN 112666097B CN 202011627636 A CN202011627636 A CN 202011627636A CN 112666097 B CN112666097 B CN 112666097B
Authority
CN
China
Prior art keywords
data
spectral
infrared spectrum
infrared
polynomial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011627636.0A
Other languages
English (en)
Other versions
CN112666097A (zh
Inventor
兰江
姚志文
隋峰
余恒恒
何涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Csic Anpel Instrument Co ltd Hubei
Original Assignee
Csic Anpel Instrument Co ltd Hubei
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Csic Anpel Instrument Co ltd Hubei filed Critical Csic Anpel Instrument Co ltd Hubei
Priority to CN202011627636.0A priority Critical patent/CN112666097B/zh
Publication of CN112666097A publication Critical patent/CN112666097A/zh
Application granted granted Critical
Publication of CN112666097B publication Critical patent/CN112666097B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Spectrometry And Color Measurement (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

本发明公开了一种傅里叶红外多项式迭代平滑滤波基线校正方法,首先基于多项式迭代的傅里叶红外光谱数据谱峰辨识,通过构建光谱数据的多项式拟合曲线并设定合适的阈值,通过多次迭代求取光谱峰值区域;然后,基于平滑滤波的光谱数据平滑及基线计算,采用平滑滤波滤除光谱数据中的噪声并拟合基线。在红外光谱数据中多噪声情况下,本发明方法能够准确定位谱峰区域,实现了红外光谱基线校正软件全自动处理。本发明方法可以有效解决光谱数据中存在噪声情况下多项式迭代谱峰截取局部收敛问题,可以实现全自动红外光谱基线校正。本发明提出的方法可广泛用以红外光谱数据处理以及紫外光谱或其他谱线数据的基线校正。

Description

一种傅里叶红外多项式迭代平滑滤波基线校正方法
技术领域
本发明属于傅里叶红外光谱数据处理技术领域,涉及一种傅里叶红外多项式迭代平滑滤波基线校正方法。
背景技术
傅里叶红外光谱仪在测量样品时,由于仪器响应、背景变化等因素使得傅里叶红外光谱仪测得的光谱中除了含有实际信号的波形外,还存在缓慢变化的趋势项,这种光谱的变化称为基线漂移,它会对后续光谱的定量、定性分析造成极大影响。因此,对光谱进行基线校正是红外光谱信号处理的关键步骤。
目前,红外光谱基线校正主要有微分法、小波变换法和多项式拟合法。微分法可在一定程度上校正基线,但同时也会放大噪声,甚至会使光谱发生畸变;小波变换法可以有效去除基线漂移,但需要手动选取小波参数,而不同的小波参数会对基线拟合结果产生很大影响;多项式拟合法利用最小二乘法对光谱进行基线拟合,其缺点是在拟合基线的同时会受到特征峰的影响,不能完整地拟合真实的基线。迭代多项式拟合则是不断地对特征峰进行截断,逐次拟合出基线。传统的迭代多项式方法对红外光谱数据直接处理,对红外数据中噪声很多的情况,特征峰截取容易陷入局部收敛,造成特征峰截取不完整。
由此可见,现有红外光谱基线校正方法由于各种各样的原因,在实用过程中可能造成光谱失真,需要人工干预,抗噪声性能差。因此,目前亟需一种能够校正基线的方法,在噪声情况下仍能够准确定位特征峰区域,并校正基线。
发明内容
有鉴于此,本发明提出一种傅里叶红外多项式迭代平滑滤波基线校正方法,结合多项式迭代和平滑滤波的优点,提出一种可以有效解决光谱数据中存在噪声情况下多项式迭代特征峰截取局部收敛问题的方法,可以实现全自动红外光谱基线校正。本发明提出的方法可广泛用以红外光谱数据处理以及紫外光谱或其他谱线数据的基线校正。
为达到上述目的,本发明的技术方案为:
一种傅里叶红外多项式迭代平滑滤波基线校正方法,具体步骤包括:
步骤一、对平滑滤波后的傅里叶红外光谱数据y1进行谱峰辨识,通过构建光谱数据的多项式拟合曲线并设定阈值ε,并经过多次迭代求取光谱的峰值区域,并截断所述谱峰区域,得到截断所述谱峰区域后的红外光谱作为步骤一的输出y2
步骤二、采用平滑滤波滤除所述y2中的噪声,得到校正后的基线y′n
进一步的,步骤一具体包括如下步骤:
S1、对平滑滤波后的红外光谱数据y1建立多项式拟合方程yn=y(x),并采用最小二乘法求解:
y(x)=a0+a1x+a2x2+...+anxn
其中,aj为多项式拟合方程的第j个系数,n+1为系数的总数,x为红外光谱数据的横坐标波数,j=0,1,2,...,n。
S2、计算多项式拟合标准差σ。
S3、根据标准差σ求取红外光谱数据y1中的谱峰位置。
S4、根据红外光谱数据导数y1'求解谱峰的左右极限位置Lleft和Lright
其中,在谱峰的辨识过程中,进行如下拓展:依次计算谱峰y1(i)两侧的红外光谱数据点的导数,当光谱数据的导数y1'(i)前后连续两红外光谱数据点的乘积为负,则拓展结束。
找到拓展后完整的谱峰区域后,采用线性替换的方式截断谱峰区域。
Figure BDA0002873378690000031
其中,Lright和Lleft分别为谱峰的左极限位置和右极限位置,i=0,1,2,...,N。
S5、将y1中Lleft和Lright之间的数据截断,构造新的红外光谱数据y1,返回步骤S1,根据新的y1构建新的多项式拟合方程y(n);当S2中新的多项式拟合方程y(n)与上一次多项式拟合方程的偏差值小于设定阈值ε时,停止重复,则步骤一完成,输出y2;否则,继续步骤一中的其他步骤。
步骤一完成后,将当前的红外光谱数据y1作为步骤一的输出结果y2
进一步的,步骤二具体包括如下步骤:
S6、对y2进行平滑滤波,得到红外光谱的基线y′n
进一步的,阈值ε为0.1。
有益效果:本发明提出了一种傅里叶红外多项式迭代平滑滤波基线校正方法,首先基于多项式迭代的傅里叶红外光谱数据谱峰辨识,通过构建光谱数据的多项式拟合曲线并设定合适的阈值,通过多次迭代求取光谱峰值区域;然后,基于平滑滤波的光谱数据平滑及基线计算,采用平滑滤波滤除光谱数据中的噪声并拟合基线。因此,在红外光谱数据中多噪声情况下,使用本发明方法依旧能够准确定位特征峰区域,实现了红外光谱基线校正软件全自动处理。本发明方法可以有效解决光谱数据中存在噪声情况下多项式迭代特征峰截取局部收敛问题,可以实现全自动红外光谱基线校正。本发明提出的方法可广泛用以红外光谱数据处理以及紫外光谱或其他谱线数据的基线校正。
附图说明
图1为本发明的具体流程图。
具体实施方式
下面结合附图并举实施例,对本发明进行详细描述。
本发明提出的傅里叶红外多项式迭代平滑滤波基线校正方法的具体流程如图1所示。傅里叶红外光谱数据经平滑滤波后送入迭代多项式拟合处理,得到所有谱峰后,采用线性替代扣除谱峰,扣除谱峰后的光谱数据经平滑滤波即为校正后的所求基线。
本发明方法分为两个部分:基于多项式迭代的傅里叶红外光谱数据谱峰辨识和基于平滑滤波的光谱数据平滑及基线计算。
1、多项式迭代谱峰辨识:对平滑滤波后的傅里叶红外光谱数据y1进行谱峰辨识,通过构建光谱数据的多项式拟合曲线并设定阈值ε,并经过多次迭代求取光谱的峰值区域,并截断所述谱峰区域,得到截断所述谱峰区域后的红外光谱数据y2,具体步骤为:
S1、对平滑滤波后的红外光谱数据y1建立多项式拟合方程yn=y(x),并采用最小二乘法求解:
y(x)=a0+a1x+a2x2+...+anxn
其中,aj=(j=0,1,2,...,n)为多项式拟合方程的第j个系数,n+1为系数的总数,x为红外光谱数据的横坐标波数。
S2、计算多项式拟合标准差σ,公式为:
Figure BDA0002873378690000041
其中,N为红外光谱数据中包含的数据点数;y1(i)是第i个数据点在y1上的对应值,yn(i)是第i个数据点在yn上的对应值。
S3、根据标准差σ求取红外光谱数据y1中的谱峰位置,谱峰位置处的y1-yn>σ。
S4、根据红外光谱数据导数y1'求解谱峰的左右极限位置Lleft和Lright
本发明实施例中,在谱峰的辨识过程中,依次计算谱峰y1(i)两侧的红外光谱数据点的导数,当光谱数据的导数y1'(i)前后连续两红外光谱数据点的乘积为负,则拓展结束;导数y1'(i)的计算规则为:
Figure BDA0002873378690000051
找到拓展后完整的谱峰区域后,采用线性替换的方式截断谱峰区域。
Figure BDA0002873378690000052
其中,Lright和Lleft分别为谱峰的左极限位置和右极限位置,i=0,1,2,...,N。
S5、将y1中Lleft和Lright之间的数据截断,构造新的红外光谱数据y1,返回步骤S1,根据y1构建新的多项式拟合方程y1(n);当S2中新的多项式拟合方程y1(n)与上一次多项式拟合方程的偏差值小于设定阈值ε时,停止重复,则步骤一完成,输出y1。本发明实施例中,阈值ε为0.1。
2、数据平滑与基线计算:采用平滑滤波滤除红外光谱数据y1中的噪声,得到校正后的基线y′n。即,在得到傅里叶红外光谱数据中所有谱峰后,截取所有的谱峰,然后对截取后的红外光谱数据进行滤波处理即可得到傅里叶红外光谱基线。
S6、对y1进行平滑滤波,得到y2
S7、对y2进行平滑滤波,得到红外光谱的基线y′n
本发明实施例中,平滑滤波的具体方法为:
Figure BDA0002873378690000053
其中,滤波器长度为2M,k=0,1,2,...,N;y0(k)为初始红外光谱数据;yf(k)为平滑滤波后得到的红外光谱数据。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (2)

1.一种傅里叶红外多项式迭代平滑滤波基线校正方法,其特征在于,具体步骤包括:
步骤一、对平滑滤波后的傅里叶红外光谱数据y1进行谱峰辨识,通过构建光谱数据的多项式拟合曲线并设定阈值ε,并经过多次迭代求取光谱的峰值区域,并截断所述谱峰区域,得到截断所述谱峰区域后的红外光谱作为步骤一的输出y2
步骤二、采用平滑滤波滤除所述y2中的噪声,得到校正后的基线y′n
其中,所述步骤一具体包括如下步骤:
S1、对平滑滤波后的红外光谱数据y1建立多项式拟合方程yn=y(x),并采用最小二乘法求解:
y(x)=a0+a1x+a2x2+...+anxn
其中,aj为所述多项式拟合方程的第j个系数,n+1为系数的总数,x为所述红外光谱数据的横坐标波数,j=0,1,2,...,n;
S2、计算多项式拟合标准差σ,公式为:
Figure FDA0003282693600000011
其中,N为红外光谱数据中包含的数据点数;y1(i)是第i个数据点在y1上的对应值,yn(i)是第i个数据点在yn上的对应值;
S3、根据标准差σ求取所述红外光谱数据y1中的谱峰位置;
S4、根据红外光谱数据导数y1'求解所述谱峰的左右极限位置Lleft和Lright
其中,在谱峰的辨识过程中,进行如下拓展:依次计算谱峰y1(i)两侧的红外光谱数据点的导数,当光谱数据的导数y1'(i)前后连续两红外光谱数据点的乘积为负,则拓展结束;
找到拓展后完整的谱峰区域后,采用线性替换的方式截断所述谱峰区域:
Figure FDA0003282693600000021
其中,Lright和Lleft分别为所述谱峰的左极限位置和右极限位置,i=0,1,2,...,N;
S5、将y1中Lleft和Lright之间的数据截断,构造新的红外光谱数据y1,返回步骤S1,根据新的y1构建新的多项式拟合方程y(n);当新的多项式拟合方程y(n)与上一次多项式拟合方程的偏差值小于设定阈值ε时,停止重复,则步骤一完成,输出y2;否则,继续步骤一中的其他步骤;
步骤一完成后,将当前的红外光谱数据y1作为步骤一的输出结果y2
其中,所述步骤二具体包括如下步骤:
S6、对y2进行平滑滤波,得到红外光谱的基线y′n,平滑滤波的具体方式为:
Figure FDA0003282693600000022
其中,滤波器长度为2M,k=0,1,2,...,N;y0(k)为初始红外光谱数据;yf(k)为平滑滤波后得到的红外光谱数据。
2.如权利要求1所述的一种傅里叶红外多项式迭代平滑滤波基线校正方法,其特征在于,所述阈值ε为0.1。
CN202011627636.0A 2020-12-30 2020-12-30 一种傅里叶红外多项式迭代平滑滤波基线校正方法 Active CN112666097B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011627636.0A CN112666097B (zh) 2020-12-30 2020-12-30 一种傅里叶红外多项式迭代平滑滤波基线校正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011627636.0A CN112666097B (zh) 2020-12-30 2020-12-30 一种傅里叶红外多项式迭代平滑滤波基线校正方法

Publications (2)

Publication Number Publication Date
CN112666097A CN112666097A (zh) 2021-04-16
CN112666097B true CN112666097B (zh) 2021-11-19

Family

ID=75412584

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011627636.0A Active CN112666097B (zh) 2020-12-30 2020-12-30 一种傅里叶红外多项式迭代平滑滤波基线校正方法

Country Status (1)

Country Link
CN (1) CN112666097B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116660176A (zh) * 2023-06-09 2023-08-29 无锡迅杰光远科技有限公司 傅里叶光谱自动基线校正方法、装置和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102360502A (zh) * 2011-09-07 2012-02-22 中国科学院武汉物理与数学研究所 一种自动基线校正方法
CN108287137A (zh) * 2017-12-22 2018-07-17 必欧瀚生物技术(合肥)有限公司 一种基于分段多项式拟合的基线校正方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102360502A (zh) * 2011-09-07 2012-02-22 中国科学院武汉物理与数学研究所 一种自动基线校正方法
CN108287137A (zh) * 2017-12-22 2018-07-17 必欧瀚生物技术(合肥)有限公司 一种基于分段多项式拟合的基线校正方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于改进迭代多项式拟合的红外光谱基线校正方法;宁志强 等;《激光与光电子学进展》;20200229;第57卷(第3期);第033001-2至033001-3页 *
心电图中T波电交替检测关键技术研究;佘黎煌;《中国博士学位论文全文数据库 医药卫生科技辑》;20170315(第3期);第31-34页 *

Also Published As

Publication number Publication date
CN112666097A (zh) 2021-04-16

Similar Documents

Publication Publication Date Title
CN105628645B (zh) 一种近红外分析模型的转移方法
CN112666097B (zh) 一种傅里叶红外多项式迭代平滑滤波基线校正方法
CN109522801B (zh) 飞行时间质谱仪的重叠峰分离方法及系统
CN106053430B (zh) 用于微量气体拉曼光谱检测基线校正的包络线迭代方法
CN107533593A (zh) 用于通过质谱法从参考亚群的集合中鉴定未知微生物亚群的方法
CN110503156B (zh) 一种基于最小相关系数的多变量校正特征波长选择方法
CN117349683B (zh) 基于光谱数据的汽车配件涂装色差异常检测系统
CN107421907B (zh) 红外光谱的自动基线校正方法
CN116388733B (zh) 一种适用于近红外水果无损检测的光谱预处理方法及装置
CN112557332A (zh) 一种基于光谱分峰拟合的光谱分段和光谱比对方法
CN117007184A (zh) 一种光谱的全自动光谱基线校正方法
CN114487073A (zh) 一种飞行时间核酸质谱数据校准方法
CN116432051A (zh) 一种近红外光谱数据微弱差异信号的评价方法
EP1971928A2 (en) Spectrometric data cleansing
CN112730712A (zh) 提高lc-ms数据信噪比的方法
CN110542441B (zh) 一种光纤布拉格光栅传感系统的信号解调方法
CN109444072B (zh) 一种近红外光谱模型转移中诡峰的解决方法
CN114707540B (zh) 一种谱图基线的确定方法
JP2001059772A (ja) ベースライン補正方法
CN111289106B (zh) 一种基于数字滤波的光谱降噪方法
CN113466158B (zh) 一种滤光片计量性能快速检测方法
CN114018856B (zh) 光谱校正方法
CN112051080A (zh) 一种核电站压缩空气干燥器露点测定试验的评价方法
CN111256819B (zh) 一种光谱仪器的降噪方法
CN110701997A (zh) 一种基于Morlet小波变换的白光干涉信号漏采样校正方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant