CN109060681B - 痕量金属离子浓度区间预测方法、装置及存储介质 - Google Patents
痕量金属离子浓度区间预测方法、装置及存储介质 Download PDFInfo
- Publication number
- CN109060681B CN109060681B CN201810630305.9A CN201810630305A CN109060681B CN 109060681 B CN109060681 B CN 109060681B CN 201810630305 A CN201810630305 A CN 201810630305A CN 109060681 B CN109060681 B CN 109060681B
- Authority
- CN
- China
- Prior art keywords
- model
- trace metal
- function
- metal ions
- concentration interval
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 229910021655 trace metal ion Inorganic materials 0.000 title claims abstract description 43
- 238000003860 storage Methods 0.000 title claims abstract description 9
- 238000001228 spectrum Methods 0.000 claims abstract description 36
- 238000012706 support-vector machine Methods 0.000 claims abstract description 30
- 239000007788 liquid Substances 0.000 claims abstract description 19
- 238000004590 computer program Methods 0.000 claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 8
- 238000012847 principal component analysis method Methods 0.000 claims abstract description 4
- 230000006870 function Effects 0.000 claims description 52
- 230000003595 spectral effect Effects 0.000 claims description 36
- 239000011159 matrix material Substances 0.000 claims description 18
- 229910021645 metal ion Inorganic materials 0.000 claims description 14
- 238000005457 optimization Methods 0.000 claims description 14
- 238000004422 calculation algorithm Methods 0.000 claims description 13
- 238000007476 Maximum Likelihood Methods 0.000 claims description 6
- 238000012937 correction Methods 0.000 claims description 6
- 230000007704 transition Effects 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 4
- 125000004122 cyclic group Chemical group 0.000 claims description 3
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 230000009977 dual effect Effects 0.000 claims description 3
- 238000004611 spectroscopical analysis Methods 0.000 claims description 3
- 238000012546 transfer Methods 0.000 claims description 3
- 238000000926 separation method Methods 0.000 claims 1
- 150000002500 ions Chemical class 0.000 abstract description 42
- 239000010949 copper Substances 0.000 description 22
- 239000012535 impurity Substances 0.000 description 11
- 239000000243 solution Substances 0.000 description 11
- 238000000513 principal component analysis Methods 0.000 description 10
- 230000002829 reductive effect Effects 0.000 description 10
- PTFCDOFLOPIGGS-UHFFFAOYSA-N Zinc dication Chemical compound [Zn+2] PTFCDOFLOPIGGS-UHFFFAOYSA-N 0.000 description 9
- 238000009826 distribution Methods 0.000 description 7
- 238000000746 purification Methods 0.000 description 7
- 238000002835 absorbance Methods 0.000 description 6
- 239000011259 mixed solution Substances 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000000605 extraction Methods 0.000 description 5
- 239000000843 powder Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 4
- 229910052751 metal Inorganic materials 0.000 description 4
- 239000002184 metal Substances 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000000870 ultraviolet spectroscopy Methods 0.000 description 4
- 239000011701 zinc Substances 0.000 description 4
- 229910052725 zinc Inorganic materials 0.000 description 4
- 239000003153 chemical reaction reagent Substances 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 238000010200 validation analysis Methods 0.000 description 3
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 2
- HCHKCACWOHOZIP-UHFFFAOYSA-N Zinc Chemical compound [Zn] HCHKCACWOHOZIP-UHFFFAOYSA-N 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 229910017052 cobalt Inorganic materials 0.000 description 2
- 239000010941 cobalt Substances 0.000 description 2
- GUTLYIVDDKVIGB-UHFFFAOYSA-N cobalt atom Chemical compound [Co] GUTLYIVDDKVIGB-UHFFFAOYSA-N 0.000 description 2
- 229910052802 copper Inorganic materials 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012797 qualification Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- QEVHRUUCFGRFIF-UHFFFAOYSA-N 6,18-dimethoxy-17-[oxo-(3,4,5-trimethoxyphenyl)methoxy]-1,3,11,12,14,15,16,17,18,19,20,21-dodecahydroyohimban-19-carboxylic acid methyl ester Chemical compound C1C2CN3CCC(C4=CC=C(OC)C=C4N4)=C4C3CC2C(C(=O)OC)C(OC)C1OC(=O)C1=CC(OC)=C(OC)C(OC)=C1 QEVHRUUCFGRFIF-UHFFFAOYSA-N 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- DMKMTGULLYISBH-UHFFFAOYSA-L disodium;3-hydroxy-4-nitrosonaphthalene-2,7-disulfonate Chemical compound [Na+].[Na+].C1=C(S([O-])(=O)=O)C=C2C=C(S([O-])(=O)=O)C(O)=C(N=O)C2=C1 DMKMTGULLYISBH-UHFFFAOYSA-L 0.000 description 1
- 238000011549 displacement method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000002386 leaching Methods 0.000 description 1
- 238000001556 precipitation Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000002371 ultraviolet--visible spectrum Methods 0.000 description 1
- -1 zinc Zn (II) ions Chemical class 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
- G01N21/31—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
- G01N21/3103—Atomic absorption analysis
Landscapes
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Other Investigation Or Analysis Of Materials By Electrical Means (AREA)
Abstract
本发明涉及一种痕量金属离子浓度区间预测方法、装置及存储介质。该方法，包括步骤：S1、基于待测液的导数光谱获取所述待测液中痕量金属离子的最佳建模区间，并利用所述最佳建模区间结合主成分分析法提取痕量金属离子光谱信号特征；S2、基于支持向量机模型对所述痕量金属离子光谱信号特征进行处理，获得所述痕量金属离子的浓度区间预测结果。该方法能够准确获知痕量离子所属的浓度区间。所述装置包括显示器、处理器以及存储在存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现上述所述方法的步骤。所述存储介质其上存储有计算机程序，所述计算机程序被处理器执行时实现上述所述方法的步骤。
Description
技术领域
本发明涉及紫外可见光谱分析领域，具体涉及一种痕量金属离子浓度的区间预测方法、装置及存储介质。
背景技术
在湿法冶金净化工序中，料液浸出液存在金属离子种类多、特性相近、浓度比大等特点，严格控制痕量杂质金属离子的浓度对净化出口溶液合格率、电解锌品质具有重要作用。痕量杂质金属离子主要通过置换法和沉淀法去除，主金属粉料的添加量是净化过程关键的控制参数，不仅直接影响出口溶液杂质离子浓度稳定性与合格率，也直接影响净化液的产量与质量。现场操作人员主要根据杂质离子的浓度区间范围调节主金属料粉的添加量。然而离子信号非线性强、数据样本分布不均衡及误判代价不相等的特点给高浓度比背景下痕量金属离子浓度的区间预测带来极大挑战。
在净化过程中，将痕量杂质离子浓度分成几个数值区间，现场操作人员根据浓度区间添加适量主金属粉料进行去除过程。添加粉料的过程中，如果痕量杂质离子浓度的区间预测偏高，仅会增加粉料的加入量，净化完全，不会对后续工序造成影响；但是如果预测区间低于实际值，净化不完全将会导致净化出口溶液中杂质离子浓度高、波动大，发生“烧板”现象，进而降低电解产品的产量与质量，给生产过程造成巨大损失。传统方法针对现场数据分布不均衡以及上述误判代价不相等的特点，通过最大化准确性实现对模型的评估，传统算法凸显出一定的局限性。
受试者工作特征(ROC)曲线下的面积(AUC)是统计上与准确性相容但更具判别力的性能度量准则。AUC能刻画算法的整体性能，独立于先验分布、误判代价以及阈值，因此AUC在众多分类器应用场合替代准确性作为模型的性能评价准则。同时，为使优化目标与性能评价准则一致，AUC也被用作模型优化准则。
近年来，紫外可见分光光度法由于其简单、快速、稳定、灵敏度高、重现性好以及预处理操作简单等特点，在多金属离子在线分析测定领域得到了广泛应用。根据在线检测时对检测仪器快速性、稳定性、低成本等要求，紫外可见分光光度法适用于测量料液浸出液中痕量杂质金属离子信号。
发明内容
基于此，有必要针对高浓度比背景下的多金属离子混合溶液中痕量离子检测信号重叠，对痕量离子的浓度区间的预测值低于痕量离子的实际浓度的技术问题，提供一种痕量金属离子浓度区间预测方法、装置及存储介质。
本发明提出一种痕量金属离子浓度区间预测方法，包括以下步骤：
S1、基于待测液的导数光谱获取所述待测液中痕量金属离子的最佳建模区间，并利用所述最佳建模区间结合主成分分析法提取痕量金属离子光谱信号特征；
S2、基于支持向量机模型对所述痕量金属离子光谱信号特征进行处理，获得所述痕量金属离子的浓度区间预测结果。
优选地，在步骤S1之前还包括采用小波函数对待测液的光谱数据进行预处理，利用导数光谱法处理预处理后的光谱数据获得所述待测液的导数光谱。
步骤S2之前还包括：
根据多个样本的痕量金属离子的光谱信号特征构建二叉树模型，将所述二叉树模型转化为多个子模型；
根据所述子模型，构建所述支持向量机模型；
和/或，根据所述子模型，构建所述支持向量机模型还包括：
基于马氏距离-径向基核函数对所述支持向量机模型进行优化。
将所述二叉树模型转化为多个子模型具体步骤包括：
根据所述多个样本的痕量金属离子光谱信号特征划分多个浓度区间；按照优先区分浓度最高的浓度区间原则逐级递减一个浓度区间构成包括多个层级的二叉树模型；
所述二叉树模型中的每一层级对应一个所述子模型。
优选地，根据所述子模型，构建所述支持向量机模型之前还包括：
使用归一化的Wilcoxon-Mann-Whitney统计计算AUC的最大似然估计，对所述子模型进行优化。
优选地，根据所述子模型，构建所述支持向量机模型还包括：
利用状态转移算法优化所述支持向量机模型的参数。
优选地，所述AUC的最大似然估计采用非参数估计算法求解，其中所述非参数估计算法为：
其中，i＝1,…n+,j＝1,…n-，n+和n-分别表示正例样本和负例样本的个数；
和
分别表示正例样本和负例样本，f表示决策函数；其中，
为指示函数，
，其中，δ＞0表示允许存在的细微偏差；
和/或，优化所述子模型包括求解所述子模型的目标函数：
其中，C＞0是惩罚参数，用于寻找几何间隔最大超平面和保证数据偏差最小之间的权重，
为松弛变量；
表示任意；
其中，差样本集Z为：
Z为N维矩阵；
将所述子模型的优化问题转化为求解对偶问题，所述子模型的目标函数转化后：
其中，z∈Z，转化后的目标函数取决于一组拉格朗日乘子α；
其中，所述zu和zv的马氏距离-径向基(M-RBF)核函数为：
k(zu,zv)＝exp(-p(zu-zv)V-1(zu-zv)T/m)；
其中，V-1为类协方差矩阵的逆矩阵，p＞0和m＞0是控制马氏距离的关键因素，p是核参数，m为马氏距离平方的平均值；zu和zv分别表示任意两个不同的差样本；
根据转化后的目标函数，输入所述待测离子光谱信号特征x得到决策函数f以及判别函数y，根据所述决策函数及所述判别函数得到所述浓度区间预测结果；其中，
其中，b为决策阈值，由于AUC独立于决策阈值，决策阈值在得到决策函数后依据具体的分类任务确定,定义为:
优选地，所述参数的优化目标为：
max Ap；C＝w·aucp；C+(1-w)·accp；C
s.t.0＜p≤2,
0.01≤C≤100；
其中，acc为校正模型的准确度；w为AUC与准确度的加权权重；
其中，优化模型参数p和C的框架为：
其中，p的搜索范围为(0,2]：C的搜索范围为(0.01,100]：k为第k次转移循环，pk和Ck为每次循环的解，Ak和Bk为状态转移矩阵，uk是历史状态函数，y是目标函数。
本发明还提出一种用于痕量金属离子浓度区间预测的装置，包括显示器、处理器以及存储在存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
此外，本发明还包括一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现上述任一项所述方法的步骤。
本发明与现有技术对比的有益效果包括：根据痕量离子的导数光谱获取其最佳建模区间，并利用主成分分析法提取痕量离子光谱信号特征，减少多重共线性，有效确定模型输入变量，支持向量机模型将输入的待测离子光谱信号特征进行处理得到该痕量离子的浓度区间预测结果，该方法能够准确获知痕量离子的浓度区间，在其中一个实施例中，对Cu(II)的浓度区间的预测准确率为93.75％，且将对预测值判断低于痕量离子实际浓度的概率为0；Co(II)预测准确率为81.25％，且将对预测值判断低于痕量离子的概率为6.25％。
附图说明
图1为本发明实施例提供的痕量金属离子浓度的区间预测方法的流程示意图。
图2为本发明实施例提供的三种金属离子的光谱信号图。
图3为本发明实施例提供的在不同的离子干扰环境下Cu2+在520nm波长处的吸光度系数。
图4为本发明实施例提供的三种金属离子的导数光谱信号图。
图5为本发明实施例提供的二叉树结构示意图。
图6为本发明实施例提供的模型参数优化算法的流程示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似改进，因此本发明不受下面公开的具体实施的限制。
结合图1，本实施例提出一种痕量金属离子浓度区间预测方法，包括以下步骤：
T1、采用小波函数对待测液的光谱数据进行预处理，预处理后的光谱数据利用导数光谱法获得所述待测液的导数光谱。其中，光谱数据通过紫外可见分光光度法获取，具体地，获取待测液在全波段的吸光度，例如可以为以1nm为间隔、以400-800nm为波长范围，包含的401个波长点的吸光度。为了减少噪声对光谱信号的影响，并使光谱信号更加平滑，采用经典db3小波函数对光谱数据进行去噪。
其中，待测液可以为含有多种金属离子的混合溶液，并且该待测液中基体离子与待测的痕量金属离子可以具有高浓度比。
T2、基于导数光谱获取痕量离子的最佳建模区间，并利用所述最佳建模区间结合主成分分析法(PCA)提取待测离子光谱信号特征，减少多重共线性。需要说明的是，溶液中的主基体离子的高浓度导致痕量离子光谱信号被主基体离子掩蔽，为了尽可能多地提取痕量离子光谱信息，分别获取所有金属离子的一阶导数光谱，分析比较多种金属离子的光谱特征，选取待测离子光谱信号变化率最大而其他干扰离子光谱信号变化率小的区间作为建模区间。进一步地，采用主成分分析(PCA)提取光谱特征，以90％的累积贡献率确定主成分数获得新变量，这些新变量能够代表原始数据的绝大部分信息并减少噪声的干扰。
T3、基于支持向量机模型(SVM)对所述痕量金属离子光谱信号特征进行处理，获得所述痕量金属离子的浓度区间预测结果。其中，所述支持向量机模型包括多个子模型；每个所述子模型设有至少两个待预测的浓度区间。
基于上述实施例，本实施例步骤T2之前还包括建：
根据多个样本的痕量金属离子的光谱信号特征构建二叉树模型，将所述二叉树模型转化为多个子模型，避免了传统方法中的不可分割性。
基于上述实施例，本实施例中将所述二叉树模型转化为多个子模型具体步骤包括：
根据所述多个样本的痕量金属离子光谱信号特征划分多个浓度区间；按照优先区分浓度最高的浓度区间原则逐级递减一个浓度区间构成包括多个层级的二叉树模型；
所述二叉树模型中的每一层级对应一个所述子模型。
例如将所有的样本的痕量金属离子光谱信号特征分为四个浓度区间，其中，区间浓度从高到低依次为：第四浓度区间、第三浓度区间、第二浓度区间、第一浓度区间。优先区分第四个浓度区间和前三个浓度区间，建立子模型1；然后在三个浓度区间中区分第三浓度区间和其他两个浓度区间，建立子模型2；最后在两个浓度区间中区分第一浓度区间和第二浓度区间，建立子模型3。例如在子模型1中，被判断为第四浓度区间的离子光谱信号为正例样本，被判为另外三个浓度区间的离子光谱信号为负例样本。
基于上述实施例，本实施例中构建所述支持向量机模型还包括基于马氏距离-径向基核函数(M-RBF)对所述支持向量机模型进行优化。传统SVM或者用于优化AUC的SVM模型，采用的判别函数仅由支持向量或支持向量对确定，更具体地说，只关注正好满足或不能满足排序约束的样本的贡献，这可能导致整个样本集信息的丢失。引入马氏距离-径向基核函数(M-RBF)可弥补信息损失，充分利用数据内部信息，并提高模型的非线性映射能力。进一步地，马氏距离-径向基核函数具有维数独立性和挖掘特征之间耦合的特性，它通过使用方差和协方差矩阵考虑了数据间的相关性，可以强调具有较强相对性的特征并减少不相关特征的影响，充分利用数据内部信息并可以表示数据的整体结构。因此引入马氏距离-径向基(M-RBF)核函数实现将输入空间映射到具有全局结构信息的特征空间。
基于上述实施例，进一步地，根据所述子模型，构建所述支持向量机模型之前还包括：
使用归一化的Wilcoxon-Mann-Whitney统计计算AUC的最大似然估计，对所述子模型进行优化。
基于上述实施例，在本实施例中所述AUC的最大似然估计采用非参数估计算法求解，其中所述非参数估计算法为：
其中，i＝1,…n+,j＝1,…n-，n+和n-分别表示正例样本和负例样本的个数；
和
分别表示正例样本和负例样本，f表示决策函数；其中，
为指示函数，
，其中，δ＞0表示允许存在的细微偏差。
进一步地，优化所述子模型包括求解所述子模型的目标函数：
其中，C＞0是惩罚参数，用于寻找几何间隔最大超平面和保证数据偏差最小之间的权重，
为松弛变量；
表示任意；
其中，差样本集Z为：
Z为N维矩阵。需要说明的是差样本集Z表示每个正例样本与每个例样本的差的集合。
将所述子模型的优化问题转化为求解对偶问题，所述子模型的目标函数转化为：
其中，z∈Z，转化后的目标函数取决于一组拉格朗日乘子α；
其中，所述zu和zv的马氏距离-径向基(M-RBF)核函数为：
k(zu,zv)＝exp(-p(zu-zv)V-1(zu-zv)T/m)；
其中，V-1为类协方差矩阵的逆矩阵，p＞0和m＞0是控制马氏距离的关键因素，p是核参数，m为马氏距离平方的平均值；zu和zv分别表示任意两个不同的差样本。
根据转化后的目标函数，输入所述待测离子光谱信号特征x得到决策函数f以及判别函数y，根据所述决策函数及所述判别函数得到所述浓度区间预测结果；其中，
其中，b为决策阈值，由于AUC独立于决策阈值，决策阈值在得到决策函数后依据具体的分类任务确定,定义为:
此外，本实施例中构建所述支持向量机模型还包括利用状态转移算法优化所述支持向量机模型的参数。其中，所述参数的优化目标为：
max Ap；C＝w·aucp；C+(1-w)·accp；C
s.t.0＜p≤2,
0.01≤C≤100； (7)
其中，acc为校正模型的准确度；w为AUC与准确度的加权权重；
其中，优化模型参数p和C的框架为：
其中，p的搜索范围为(0,2]：C的搜索范围为(0.01,100]：k为第k次转移循环，pk和Ck为每次循环的解，Ak和Bk为状态转移矩阵，uk是历史状态函数，y是目标函数。
基于上述实施例，本实施例还包括一种用于痕量金属离子浓度区间预测的装置，包括显示器、处理器以及存储在存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
基于上述实施例，本实施例还包括一种存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述方法的步骤。
下面举例说明本发明实施例提供的痕量金属离子浓度的区间预测方法。
在亚硝基R盐的显色体系下配置高浓度比的锌Zn(II)和铜Cu(II)、钴Co(II)单离子溶液和三者的混合溶液，其中锌Zn(II)离子为基体离子，铜Cu(II)、钴Co(II)为待进行区间预测的痕量金属离子。以试剂空白(不含Zn(II)、Cu(II)、Co(II)，只含显色剂和缓冲剂的试剂)作参比测量混合溶液的吸光度。光谱仪采用双光路设计，扫描范围为400-800nm，扫描分辨率为1nm，光谱带宽为2nm，实验环境稳定在20±2℃。其中Zn(II)浓度为70-100g/L；Cu(II)、Co(II)浓度区间为：(0,1]，(1,2],(2,3]，(3,4]，单位为mg/L，为叙述方便，用I、II、III、IV分别代替所述四个区间(0,1]，(1,2],(2,3]，(3,4]。
首先应用紫外可见分光光度法得到64组Zn(II)、Cu(II)、Co(II)混合溶液光谱数据，以48组光谱数据作为校正集进行建模，16组作为未知样品用来验证模型。
光谱数据中除了含有样品自身的信息外，还包含有其他无关信息和噪声，如电噪声、样品背景和杂散光等，因此在建立模型前，有必要对光谱数据进行消噪预处理,从而有效的滤除噪声,提升光谱分析的精度。由于小波分析具有多分辨率、低熵性、去相关性等特点，在分析处理光谱信号等非平稳信号方面具有明显优势。
图2为本发明实施例提供的Zn(II)、Cu(II)、Co(II)三种金属离子的光谱信号图。如图2所示，由于高浓度比，基质离子(Zn(II))的光谱信号在400-500nm范围内严重覆盖了痕量杂质离子(Cu(II)、Co(II))的光谱信号，并且由于痕量杂质离子化学性质相似，彼此产生了重叠峰。同时，由于超高浓度比以及离子间严重的相互作用，痕量杂质离子的光谱信号表现出较强的非线性，以Cu(II)为例，图3为本发明实施例提供的在不同浓度的Zn(II)、Co(II)干扰环境下，Cu(II)在520nm波长处的吸光度系数存在较大差异。
因此，为了充分提取Cu(II)、Co(II)的光谱信息，减少Zn(II)的影响，选取适当的波长范围进行建模非常重要。对于光谱重叠严重的现象，常用的分析处理方法是导数光谱法，通过对图2进行一阶导数分析，得到图4提供的Zn(II)、Cu(II)、Co(II)三种金属离子的导数光谱信号图。如图4所示，Cu(II)在490-544nm范围内一阶导数光谱达到峰值，且Zn(II)、Co(II)导数光谱信号较为平缓，因此将490-544nm作为Cu(II)的建模区间；在524-608nm范围内，Co(II)导数光谱达到峰值，且此波段范围内Zn(II)、Cu(II)信号较小，因此选用524-608nm作为的Co(II)建模区间。
在所述波长范围(建模区间)内，波长变量包含大量的冗余或无关信息，同时为了减少变量个数，提高模型精度、降低复杂度，需要对吸光度进行特征提取，选择有效的待测离子光谱信号特征进行建模。PCA是特征提取最常用的方法之一，在化学计量学中起重要作用。PCA提取的特征变量(即待测离子光谱信号特征)可以充分表示原始数据的特征而不丢失信息，特征变量相互正交，降低了多重共线性，进一步减少了测量噪声的干扰，同时减少了输入向量的维数，提高模型的性能。
将上述PCA提取的特征变量作为模型输入变量。
图5为本发明实施例提供的二叉树结构示意图，按照图5所述，分别针对Cu(II)、Co(II)建立三个子模型。图6为本发明实施例提供的模型参数优化算法的流程示意图。每个子模型的具体参数优化步骤如下：
步骤a：根据所分类别，根据式(5)计算差样本集，然后利用PCA进行特征提取，以90％的累积贡献率作为主成分提取的终止条件，将特征变量作为输入变量输入模型；
步骤b：初始化迭代状态K＝0以及待优化的模型参数p和C，将p和C的初始值带入式(4)，利用基于AUC的SVM求解模型，然后计算48组校正集的AUC数值aucp；C和准确率accp；C，根据式(7)计算目标值Ap；C，并将此值设定为最优值Abest；
步骤c：在每次循环中，跟新迭代状态k＝k+1,根据STA中的四种特殊状态转换算子更新待优化的模型参数p和C，利用基于AUC的SVM求解模型，重新计算48组校正集的AUC数值aucp；C和准确率accp；C，根据式(7)计算目标值Ap；C，比较Ap；C和Abest，如果Ap；C＞Abest，将Ap；C设定为新的最优值Abest，并保留此次循环中的参数p和C数值；如果Ap；C≤Abest，重复此次循环；
步骤d：达到设定的最大状态循环次数(设定值为100)，终止循环，并输出保留得到的Abest，p和C。
确定每个子模型的模型参数，用16组验证集验证模型。
为了说明本发明实施例提供的方法具有效果，本发明实施例还使用PSO-SVM，BP-ANN对Cu(II)、Co(II)进行区间预测，从而与本发明实施例提供的方法进行对比。
在净化工序中，区间预测误差是允许存在的，但是由于不相等的误判代价(包括生产成本、质量检测和金属回收等)，应该尽可能减少浓度区间预测低于实际值情况的发生。
针对高锌背景下，Cu(II)和Co(II)光谱信号被遮掩，谱信号呈现较强的非线性，且样本数据分布不均衡和误判代价不相等的情况，本发明实施例提供的基于AUC的SVM模型对Cu(II)和Co(II)浓度区间进行预测，采用16组验证集验证模型。本实施例提出不能容忍率Int：
其中，NM表示将高浓度区间错误地预测为低浓度区间的数量，sum是验证集总体样本数。
需要说明的是，本实施例中的不能容忍率Int是指将预测值判断为低于痕量离子实际浓度的概率。
为了直观比较三种模型的性能，采用正确率Acc和不能容忍率Int作为模型的评价指标。正确率Acc公式定义为：
其中，NA表示区间预测正确的样本数量，sum是验证集总体样本数。
16组混合溶液中Cu(II)和Co(II)的浓度区间预测结果分别见表1和表2。
表1Cu(II)区间预测建模比较
表2Co(II)区间预测建模比较
与PSO-SVM和BP-ANN相比，本发明实施例所提供的区间预测模型获得的Cu(II)和Co(II)的浓度区间预测正确率(Acc)不低于其他两种方法，分别为93.75％和81.25％，更重要的是，Cu(II)和Co(II)的浓度区间预测的不能容忍率(Int)分别为0和6.25％，远远低于其他两种方法，很大程度控制减少了预测结果偏低情况的发生。分析表1和表2可得，本发明实施例提供的痕量金属离子浓度的区间预测方法型取得了更好的检测结果，效果理想，更好的解决了高浓度比背景、样本数据分布不均衡和误判代价不相等的情况下痕量离子的区间预测问题。
本发明提供的痕量金属离子浓度的区间预测方法，通过采用小波去噪预处理和PCA特征提取，减少测量噪声的干扰，减少光谱变量，降低多重共线性，提高模型精度、降低计算复杂度；利用AUC替代准确率作为模型准则，AUC不仅对不均衡分布和不相等误判代价不敏感，而且与分类阈值无关，避免了阈值选择过程中假定的主观性；然后用SVM模型优化AUC，在高浓度比背景下，提高非线性映射能力，并在数据样本分布不均衡和误判成本不相等的情况下，保证更好的泛化能力。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (6)
1.一种痕量金属离子浓度区间预测方法，其特征在于，包括以下步骤：
S1、基于待测液的导数光谱获取所述待测液中痕量金属离子的最佳建模区间，并利用所述最佳建模区间结合主成分分析法提取痕量金属离子光谱信号特征；
S2、基于支持向量机模型对所述痕量金属离子光谱信号特征进行处理，获得所述痕量金属离子的浓度区间预测结果；
步骤S2之前还包括：根据多个样本的痕量金属离子的光谱信号特征构建二叉树模型，将所述二叉树模型转化为多个子模型；根据所述子模型，构建所述支持向量机模型；基于马氏距离-径向基核函数对所述支持向量机模型进行优化；
将所述二叉树模型转化为多个子模型具体步骤包括：
根据所述多个样本的痕量金属离子光谱信号特征划分多个浓度区间；按照优先区分浓度最高的浓度区间原则逐级递减一个浓度区间构成包括多个层级的二叉树模型；所述二叉树模型中的每一层级对应一个所述子模型；
根据所述子模型，构建所述支持向量机模型之前还包括：使用归一化的Wilcoxon-Mann-Whitney统计计算AUC的最大似然估计，对所述子模型进行优化；
所述AUC的最大似然估计采用非参数估计算法求解，其中，所述非参数估计算法为：
其中，i＝1，…n+；j＝1，…n-；n+和n-分别表示正例样本和负例样本的个数；
和
分别表示正例样本和负例样本，f表示决策函数；其中，
为指示函数，
其中，δ>0表示允许存在的细微偏差；
优化所述子模型包括求解所述子模型的目标函数：
其中，C＞0是惩罚参数，用于度量数据的最大几何间隔超平面与最小偏差之间的权重，
为松弛变量；
表示任意；
其中，差样本集Z为：
Z为N维矩阵；
将所述子模型的优化问题转化为求解对偶问题，所述子模型的目标函数转化为：
其中，z∈Z，转化后的目标函数取决于一组拉格朗日乘子α；
其中，所述zμ和zv的马氏距离-径向基核函数(M-RBF)为：
k(zμ，zv)＝exp(-p(zμ-zv)V-1(zμ-zv)T/m)；
其中，V-1为类协方差矩阵的逆矩阵，p>0和m>0是控制马氏距离的关键因素，p是核参数，m为马氏距离平方的平均值；zμ和zv分别表示任意两个不同的差样本；
根据转化后的目标函数，输入所述待测金属离子光谱信号特征x得到决策函数f以及判别函数y，根据所述决策函数及所述判别函数得到所述浓度区间预测结果；其中，
其中，b为决策阈值，由于AUC独立于决策阈值，决策阈值在得到决策函数后依据具体的分类任务确定，定义为:
2.根据权利要求1所述的痕量金属离子浓度区间预测方法，其特征在于，在步骤S1之前还包括采用小波函数对待测液的光谱数据进行预处理，利用导数光谱法处理预处理后的光谱数据获得所述待测液的导数光谱。
3.根据权利要求1所述的痕量金属离子浓度区间预测方法，其特征在于，根据所述子模型，构建所述支持向量机模型还包括：
利用状态转移算法优化所述支持向量机模型的参数。
4.根据权利要求1所述的痕量金属离子浓度区间预测方法，其特征在于，所述参数的优化目标为：
max Ap；C＝w·aucp；C+(1-w)·accp；C
s.t.0<p≤2,
0.01≤C≤100；
其中，acc为校正模型的准确度；w为AUC与准确度的加权权重；
其中，优化模型参数p和C的框架为：
其中，p的搜索范围为(0,2]：C的搜索范围为(0.01,100]：k为第k次转移循环，pk和Ck为每次循环的解，Ak和Bk为状态转移矩阵，uk是历史状态函数，y是目标函数。
5.一种用于痕量金属离子浓度区间预测的装置，包括显示器、处理器以及存储在存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1～4任一项所述方法的步骤。
6.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1～4任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810630305.9A CN109060681B (zh) | 2018-06-19 | 2018-06-19 | 痕量金属离子浓度区间预测方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810630305.9A CN109060681B (zh) | 2018-06-19 | 2018-06-19 | 痕量金属离子浓度区间预测方法、装置及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109060681A CN109060681A (zh) | 2018-12-21 |
| CN109060681B true CN109060681B (zh) | 2021-02-02 |
Family
ID=64820514
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810630305.9A Active CN109060681B (zh) | 2018-06-19 | 2018-06-19 | 痕量金属离子浓度区间预测方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109060681B (zh) |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN205656174U (zh) * | 2016-05-25 | 2016-10-19 | 中南大学 | 一种用于检测痕量金属离子含量的系统 |
| CN106918567B (zh) * | 2017-03-27 | 2019-05-28 | 中南大学 | 一种测量痕量金属离子浓度的方法和装置 |
-
2018
- 2018-06-19 CN CN201810630305.9A patent/CN109060681B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN109060681A (zh) | 2018-12-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7899625B2 (en) | Method and system for robust classification strategy for cancer detection from mass spectrometry data | |
| CN110243806B (zh) | 拉曼光谱下基于相似度的混合物组分识别方法 | |
| Xie et al. | Classification of tomatoes with different genotypes by visible and short-wave near-infrared spectroscopy with least-squares support vector machines and other chemometrics | |
| CN109187392B (zh) | 一种基于分区建模的锌液痕量金属离子浓度预测方法 | |
| CN107203750B (zh) | 一种基于稀疏表达和判别分析相结合的高光谱目标检测方法 | |
| US20230243744A1 (en) | Method and system for automatically detecting and reconstructing spectrum peaks in near infrared spectrum analysis of tea | |
| CN105989597B (zh) | 基于像素选择过程的高光谱图像异常目标检测方法 | |
| CN115420707A (zh) | 一种污水近红外光谱的化学需氧量评估方法及系统 | |
| CN116205863A (zh) | 一种检测高光谱图像异常目标的方法 | |
| CN117556245B (zh) | 一种四甲基氢氧化铵生产过滤杂质检测方法 | |
| KR102013392B1 (ko) | Ft-ir 기반 분광 스펙트럼에서 svm 분류기를 이용한 가스 탐지 방법 | |
| CN111259929A (zh) | 基于随机森林的食源性致病菌的分类模型训练方法 | |
| Zhou et al. | Rapid identification of edible oil and swill-cooked dirty oil by using near-infrared spectroscopy and sparse representation classification | |
| Pereira et al. | Modelling the ageing process: A novel strategy to analyze the wine evolution towards the expected features | |
| CN109060681B (zh) | 痕量金属离子浓度区间预测方法、装置及存储介质 | |
| Zhu et al. | A prediction method for intervals of trace ions concentration in zinc sulfate solution based on UV-vis spectroscopy | |
| CN110887798B (zh) | 基于极端随机树的非线性全光谱水体浊度定量分析方法 | |
| CN114863286B (zh) | 一种基于多算法协同选优的混合废塑料分类方法 | |
| CN102880861A (zh) | 基于线性预测倒谱系数的高光谱图像分类方法 | |
| CN115728290A (zh) | 一种土壤中铬元素的检测方法、系统、设备及存储介质 | |
| CN116089828A (zh) | 基于沙猫群优化支持向量机算法的葡萄酒种类识别方法 | |
| US11525774B2 (en) | Sensory evaluation method for spectral data of mainstream smoke | |
| CN111220565B (zh) | 一种基于cpls的红外光谱测量仪器标定迁移方法 | |
| CN116484989A (zh) | 一种基于深度迁移学习的烟叶近红外多组分预测方法 | |
| CN109145887B (zh) | 一种基于光谱潜变量混淆判别的阈值分析方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |