CN115598162A - 基于堆叠式模型的土壤重金属含量检测方法 - Google Patents

基于堆叠式模型的土壤重金属含量检测方法 Download PDF

Info

Publication number
CN115598162A
CN115598162A CN202111586536.2A CN202111586536A CN115598162A CN 115598162 A CN115598162 A CN 115598162A CN 202111586536 A CN202111586536 A CN 202111586536A CN 115598162 A CN115598162 A CN 115598162A
Authority
CN
China
Prior art keywords
wavelength
interval
variable
firefly
soil
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111586536.2A
Other languages
English (en)
Inventor
任顺
陆旻波
任东
安毅
杨信廷
王纪华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Three Gorges University CTGU
Original Assignee
China Three Gorges University CTGU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Three Gorges University CTGU filed Critical China Three Gorges University CTGU
Priority to CN202111586536.2A priority Critical patent/CN115598162A/zh
Publication of CN115598162A publication Critical patent/CN115598162A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/22—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by measuring secondary emission from the material
    • G01N23/223—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by measuring secondary emission from the material by irradiating the sample with X-rays or gamma-rays and by measuring X-ray fluorescence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/004—Artificial life, i.e. computing arrangements simulating life
    • G06N3/006—Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Chemical & Material Sciences (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Analytical Chemistry (AREA)
  • Pathology (AREA)
  • Immunology (AREA)
  • Biochemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Molecular Biology (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

本发明涉及基于堆叠式模型的土壤重金属含量检测方法，包括：采集土壤样品，配置预定重金属浓度范围的土壤样本；获取土壤样本的光谱，形成样本光谱数据集；利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量；选出具有代表性的四种特征变量选择方法，分别构建基学习器进行训练、测试；将基学习器集成，构建元学习器，并对元学习器进行训练、测试；将待检测土壤的光谱输入基学习器，依据元学习器得到的波长点判断分析土壤重金属的含量。本发明将多种波长变量选择算法并联、集成，克服了单一特征变量选择方法的缺陷，提高了土壤重金属含量的检测精度，检测结果稳定性好。

Description

基于堆叠式模型的土壤重金属含量检测方法
技术领域
本发明属于农业环境检测领域，具体涉及一种基于堆叠式模型的土壤重金属含量检测方 法。
背景技术
土壤中的元素多种多样，直接获得的X射线荧光光谱具有高维度、多冗余的特点。此外， 各种元素之间还有着增强吸收效应，因此需要剔除这些无用信息，最大化利用有用信息。目 前流行的区间选择算法主要有变量区间选择法、变量信息选择法、变量优化选择法和变量统 计选择算法。这些算法各有优劣，有的算法侧重于筛选波长区间，有的侧重于筛选波段，均 存在缺陷，效果不理想。
因此，需要进一步研究优化整合这些算法，使其不再针对单个的变量进行选择，在降维 的同时也能考虑到元素之间的增强吸收效应。
发明内容
本发明的技术问题是目前已有的光谱特征变量选择算法大多考虑如何选出有效的波段或 波长区间，并不会对波长点进行优化，影响了根据光谱特征变量预测土壤重金属含量的效率； 现有的以逐步选择算法为代表的光谱波长点的精选算法效果并不理想。
本发明的目的是针对上述问题，提供一种基于堆叠式模型的土壤重金属含量检测方法， 将区间偏最小二乘法(interval partial least squares，iPLS)、变量区间组合优化算法(interval combination optimization，ICO)、萤火虫算法(firefly algorithm，FA)和连续投影算法(successive projections algorithm，SPA)等多种波长变量选择算法并联、集成，采用多个基学习器和元学 习器组成的堆叠式模型，获取土壤样本光谱的波长点，克服单一特征变量选择方法的缺陷； 对并联的多个基学习器进行分组训练，提高训练的效率。
本发明的技术方案是基于堆叠式模型的土壤重金属含量检测方法，包括以下步骤：
步骤1：采集土壤样品，配置预定重金属浓度范围的土壤样本；
步骤2：获取土壤样本的X射线荧光光谱，其中重金属元素的含量值利用化学方法标定，形 成样本光谱数据集，并将样本光谱数据集分成校正集和验证集；
步骤3：利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量；
步骤4：分别从变量区间选择算法、变量优化选择算法、变量统计选择算法和变量波段选择 算法中选出具有代表性的四种特征变量选择方法，在强信息变量与弱信息变量的基础上分别 构建基学习器进行训练、测试；
步骤5：将基学习器集成，构建元学习器，元学习器的输入是基学习器的输出，利用基学习 器的输出对元学习器进行训练、测试；
步骤6：将待检测土壤的光谱输入基学习器，依据元学习器得到待检测光谱的波长点，依据 得到的波长点判断分析土壤重金属的含量。
进一步地，变量区间选择算法和变量波段选择算法侧重于选择出对建模更重要的波段， 而且不容易受到无效波长点的干扰，因此将其作为一组进行训练，可提高训练效率，训练效 果比单独训练更好；变量统计选择算法与变量优化选择算法侧重于选择出出现频率更高的波 段，而且容易受到无效区间内波长点的干扰，因此将其作为一组进行训练，可提高训练效率， 训练效果比单独训练更好。
进一步地，步骤5中，选出的特征变量选择方法为区间偏最小二乘法、变量区间组合优 化算法、萤火虫算法和连续投影算法。
优选地，对基学习器进行分组训练，将区间偏最小二乘法对应的基学习器和区间组合优 化算法对应的基学习器作为一组进行训练，将萤火虫算法对应的基学习器和连续投影算法对 应的基学习器作为另一组进行训练。
所述利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量，具体包括：
(a)对波长变量分类；
对每个波长变量计算包含和不包含该波长变量时的偏最小二乘法模型的RMSECV平均值， 计算得到平均值的差值DMEAN(Difference of mean values)，并进行曼-惠特尼秩和检验，确 定该变量的类型；
在每次迭代中保留强信息变量和弱信息变量，直至波长变量中不包含无信息变量和干扰 变量为止；
(b)逆向消元；
筛选出强信息变量和弱信息变量后，考虑每个波长变量与其它波长变量的交互作用，进 行逆向消元，使保留的波长变量的数量进一步减少，得到最优波长变量子集。
所述变量区间组合优化算法，包括以下步骤：
1)确定光谱区间划分数量、子模型的数量和子模型的比率；
将光谱划分为宽度大致相同的n个子区间，对每个光谱子区间分别建立偏最小二乘法模 型预测重金属含量；
观察比较不同数量的区间划分下的试验结果，将最小的均方根误差值对应的光谱区间划 分数量作为最优的子区间数量；
2)确定未进行宽度优化的波长区间；
2.1)子模型的生成，利用加权自举采样，生成M个不同波长区间随机组合形成的子集，每个 波长点初始采样权重均为1，M表示采样次数，一次采样中波长z被选中的概率pz的计算式 如下：
Figure BDA0003424602910000031
式中wz、wj分别表示波长z、波长j的采样权重，e表示波长点的数量；
2.2)采用偏最小二乘法算法和5折交互检验的方式，计算每个区间组合子集对应的RMSECV 值；
2.3)从全部区间组合中提取比例为α的最优区间组合子集，并计算出这一部分区间组合子集 对应RMSECV值的平均值，记作mRMSECV，α表示提取的区间组合占全部区间组合的比例；
2.4)统计每个区间的波长在最优区间组合子集中出现的数目，下一次迭代中第x个区间对应 的采样权重如下：
Figure BDA0003424602910000032
式中fx表示第x个区间的波长在最优区间组合子集中出现的频次，kbest表示提取的最优区间 组合的数目；
重复步骤2.1)至步骤2.4)进行循环迭代，直到mRMSECV出现上升，终止迭代；
2.5)将最后一次迭代中RMSECV值最小的那一组波长区间作为最终选中的波长区间。
所述萤火虫算法，包括以下步骤：
(I)初始化，
在可行域中随机放置n个萤火虫，并赋予每个萤火虫的荧光素为l0，动态决策域为r0； 初始化步长s、领域阈值nt、荧光素消失率ρ、荧光素更新率γ、动态决策域更新率β、萤火虫感知域rs和迭代次数Y；
(II)更新萤火虫i的荧光素li(t)，
li(t)＝(1-ρ)li(t-1)+γJ(xi(t))
其中J(xi(t))表示萤火虫i在t时刻所在位置的目标函数值，xi(t)表示萤火虫i在t时刻的位置， li(t)、li(t-1)分别表示萤火虫i在t、t-1时刻的荧光素；
(III)寻找萤火虫i的邻居j
Figure BDA0003424602910000041
式中Ni(t)表示萤火虫i在t时刻邻居的集合，
Figure BDA0003424602910000042
表示萤火虫i在t时刻动态决策域，lj(t)表 示萤火虫的邻居j在t时刻的荧光素；
(IV)确定萤火虫i移动方向
J＝argmax(pij),j∈Ni(t)，
Figure BDA0003424602910000043
其中pij表示萤火虫i向邻居j方向移动的转移概率；
(V)更新萤火虫i的位置
Figure BDA0003424602910000044
式中Xi(t+1)表示萤火虫i在t+1时刻的位置，s表示步长；
(VI)更新动态决策域
Figure BDA0003424602910000045
其中
Figure BDA0003424602910000046
表示萤火虫i在t+1时刻的动态决策域，rs表示萤火虫感知域，β表示动态决策 域更新率，qt表示领域阈值。
所述连续投影算法，初始迭代向量为xk(0)，总共提取的波长变量数量为N，光谱矩阵为J 列，迭代初始时任选光谱矩阵其中1列赋值给xk(0)，连续投影算法包括以下步骤：
(1)初始化迭代次数n＝1；
(2)将未选入的剩余列向量标号l的集合记为h
Figure BDA0003424602910000051
其中k(n-1)表示第n-1次迭代选出的波长变量对应的列数；
(3)计算当前剩余列向量对xk(n-1)的投影：
Figure BDA0003424602910000052
式中Pxl表示剩余列向量xl对xk(n-1)的投影，其中P代表投影算子；
(4)提取最大投影向量的光谱波长：
k(n)＝argl(max(||P(xl)||),l∈h)
(5)n＝n+1，如果n<N，则执行步骤(2)；如果n＝N，执行步骤(6)；
(6)循环结束，最终提取出的波长位置为{k(n),n＝0,1,...,N-1}。
优选地，区间偏最小二乘法划分的光谱区间数量为20。
优选地，变量区间组合优化算法划分的光谱区间数量为15。
相比现有技术，本发明的有益效果包括：
(1)本发明将多种波长变量选择算法并联、集成，采用多个基学习器和元学习器组成的堆叠 式模型，获取土壤样本光谱的波长点，根据波长点与重金属含量的对应关系得到土壤重金属 含量，克服了单一特征变量选择方法的缺陷，提高了土壤重金属含量的检测精度，检测结果 稳定性好；
(2)本发明通过迭代保留信息法筛选出强信息变量与弱信息变量，作为堆叠式模型的输入， 极大地提高了堆叠式模型的效率，最终得到的波长点时更有效，建立的检测模型精度和稳定 性越高；
(3)本发明选择iPLS、FA、ICO、SPA四种模型作为基学习器，这四种模型选择的波长变 量有着较大的区别，异构性能强，这四种模型的精度均较为优秀，充分展现了各种模型的优 点，有效提取有用特征信息，避免过拟合的发生，提高了土壤重金属含量的预测精度；
(4)本发明对基学习器进行分组训练，提高了训练效率，训练效果更好。
附图说明
下面结合附图和实施例对本发明作进一步说明。
图1为本发明实施例的土壤重金属含量检测方法的流程示意图。
具体实施方式
如图1所示，基于堆叠式模型的土壤重金属含量检测方法，包括以下步骤：
步骤1：采集土壤样品，结合浓度梯度法配置预定重金属浓度范围的土壤样本；
在周边1000米范围内没有污染源的农田采集制样土壤，土壤样品的收集、分类、粉碎、 研磨以及装袋都采用陶瓷用具，以防止采样器具对检测结果产生影响，提高检测的可靠性。 将土壤烘干研磨，过0.45mm孔筛后，参考国家颁布的《土壤环境质量标准》中对Ⅰ、Ⅱ、Ⅲ类土壤中各元素含量的规定并结合农田土壤实际情况进行配制实验样本，土壤样本的重金 属含量利用化学方法标定；
步骤2：获取土壤样本的X射线荧光光谱，形成样本光谱数据集；
逐个取土壤样本置于X射线土壤重金属检测仪上，获取土壤样本在0～26keV范围内共 4096个通道内的光谱信息，在获取土壤样本的光谱后转动检测仪上的土壤样本，改变土壤样 本在检测仪上的方向后再次获取土壤样本的光谱，利用X射线土壤重金属检测仪对同一土壤 样本前后测量3次，根据3次测量得到的光谱计算得到土壤样本的平均光谱，不同重金属浓 度的土壤样本的光谱数据形成样本数据集，将样本数据集分为训练和验证集，以土壤样本的 被测指标的理化参照值作为划分标准将样本按照2∶1分成2组。
步骤3：利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量；
步骤4.1：对波长变量分类；
对每个波长变量计算包含和不包含该波长变量时的最小二乘法模型的RMSECV平均值， 计算得到平均值的差值，并进行曼-惠特尼秩和检验，确定该变量的类型；
在每次迭代中保留强信息变量和弱信息变量，直至波长变量中不包含无信息变量和干扰 变量为止；
步骤4.2：逆向消元；
筛选出强信息变量和弱信息变量后，考虑每个波长变量与其它波长变量的交互作用，进 行逆向消元，使保留的波长变量的数量进一步减少，得到最优波长变量子集。
步骤5：以区间偏最小二乘法iPLS、变量区间组合优化算法、萤火虫算法和连续投影算法作 为代表性的四种特征变量选择方法，分别构建基学习器，即iPLS基学习器、ICO基学习器、 FA基学习器以及SPA基学习器，利用样本数据集的校正集对基学习器进行训练；
设置最大主成分数为20，根据交叉验证法计算交互验证均方根误差(Root MeanSquare Error of Cross Validation，RMSECV)确定主成分数。iPLS划分的区间数为20，结合的区间数 为3。
训练时对基学习器进行分组训练，将区间偏最小二乘法对应的基学习器和区间组合优化 算法对应的基学习器作为一组进行训练，将萤火虫算法对应的基学习器和连续投影算法对应 的基学习器作为另一组进行训练。区间偏最小二乘法和区间组合优化算法侧重于选择出对建 模更重要的波段，而且不容易受到无效波长点的干扰，因此将其作为一组进行训练，可提高 训练效率，训练效果比单独训练更好；萤火虫算法与连续投影算法侧重于选出出现频率更高 的波段，而且容易受到无效区间内波长点的干扰，因此将其作为一组进行训练，可提高训练 效率，训练效果比单独训练更好。
利用样本数据集的校正集对基学习器进行测试，测试达到预测精度要求时停止对基学习 器的训练，否则重复对基学习器进行训练；
步骤6：将基学习器集成，构建元学习器，元学习器采用非线性的支持向量回归方法，元学 习器的输入是基学习器的输出，利用基学习器的输出对元学习器进行训练、测试；
步骤7：将待检测土壤的光谱输入基学习器，依据元学习器得到待检测土壤的波长点，建立 光谱波长点与土壤样本重金属浓度之间的映射关系，根据待检测土壤的波长点判断分析土壤 重金属的含量。
实施例中，样本数据集输入基学习器前，采用SNV对样本集或待检测光谱信息进行预处 理。然后使用IRIV算法对预处理后的光谱进行筛选，得到强信息变量与弱信息变量，将筛选 后的训练集分别对iPLS基学习器、ICO基学习器、FA基学习器以及SPA基学习器进行训练。
实施例的变量区间组合优化算法，包括以下步骤：
1)确定光谱区间划分数量、子模型的数量和子模型的比率；
将光谱划分为宽度大致相同的n个子区间，对每个光谱子区间分别建立偏最小二乘法模 型预测重金属含量；
观察比较不同数量的区间划分下的试验结果，将最小的均方根误差值对应的光谱区间划 分数量作为最优的子区间数量；
2)确定未进行宽度优化的波长区间；
2.1)子模型的生成，利用加权自举采样，生成M个不同波长区间随机组合形成的子集，每个 波长点初始采样权重均为1，M表示采样次数，一次采样中波长z被选中的概率pz的计算式 如下：
Figure BDA0003424602910000071
式中wz、wj分别表示波长z、波长j的采样权重，e表示波长点的数量；
2.2)采用偏最小二乘法算法和5折交互检验的方式，计算每个区间组合子集对应的RMSECV 值；
2.3)从全部区间组合中提取比例为α的最优区间组合子集，并计算出这一部分区间组合子集 对应RMSECV值的平均值，记作mRMSECV，α表示提取的区间组合占全部区间组合的比例；
2.4)统计每个区间的波长在最优区间组合子集中出现的数目，下一次迭代中第x个区间对应 的采样权重如下：
Figure BDA0003424602910000081
式中fx表示第x个区间的波长在最优区间组合子集中出现的频次，kbest表示提取的最优区间 组合的数目；
重复步骤2.1)至步骤2.4)进行循环迭代，直到mRMSECV出现上升，终止迭代；
2.5)将最后一次迭代中RMSECV值最小的那一组波长区间作为最终选中的波长区间。
实施例的萤火虫算法，包括以下步骤：
(I)初始化，
在可行域中随机放置o个萤火虫，并赋予每个萤火虫的荧光素为l0，动态决策域为r0； 初始化步长s、领域阈值qt、荧光素消失率ρ、荧光素更新率γ、动态决策域更新率β、萤火虫感知域rs和迭代次数M；
(II)更新萤火虫i的荧光素
li(t)＝(1-ρ)li(t-1)+γJ(xi(t)) (3)
其中J(xi(t))表示萤火虫i在t时刻所在位置的目标函数值，xi(t)表示萤火虫i在t时刻的位置， li(t)、li(t-1)分别表示萤火虫i在t、t-1时刻的荧光素；
(III)寻找萤火虫i的邻居j
Figure BDA0003424602910000082
式中Ni(t)表示萤火虫i在t时刻邻居的集合，
Figure BDA0003424602910000083
表示萤火虫i在t时刻动态决策域，lj(t)表 示萤火虫的邻居j在t时刻的荧光素；
(IV)确定萤火虫i移动方向
J＝argmax(pij),j∈Ni(t)， (5)
Figure BDA0003424602910000084
其中pij表示萤火虫i向邻居j方向移动的转移概率；
(V)更新萤火虫i的位置
Figure BDA0003424602910000085
式中Xi(t+1)表示萤火虫i在t+1时刻的位置，s表示步长；
(VI)更新动态决策域
Figure BDA0003424602910000091
其中
Figure BDA0003424602910000092
表示萤火虫i在t+1时刻的动态决策域，rs表示萤火虫感知域，β表示动态决策 域更新率，qt表示领域阈值。
所述连续投影算法，初始迭代向量为xk(0)，总共提取的波长变量数量为N，光谱矩阵为J 列，迭代初始时任选光谱矩阵其中1列赋值给xk(0)，连续投影算法包括以下步骤：
(1)初始化迭代次数n＝1；
(2)将未选入的剩余列向量标号l的集合记为h
Figure BDA0003424602910000093
其中k(n-1)表示第n-1次迭代选出的波长变量对应的列数；
(3)计算当前剩余列向量对xk(n-1)的投影：
Figure BDA0003424602910000094
式中Pxl表示剩余列向量xl对xk(n-1)的投影，其中P代表投影算子；
(4)提取最大投影向量的光谱波长：
k(n)＝argl(max(||P(xl)||),l∈h)
(5)n＝n+1，如果n<N，则执行步骤(2)；如果n＝N，执行步骤(6)；
(6)循环结束，最终提取出的波长位置为{k(n),n＝0,1,...,N-1}。
实施例中的连续投影算法参照Mario Cesar Ugulino Araujo等人于2001年发表的论文 “The successive projections algorithm for variable selection inspectroscopic multicomponent analysis”公开的连续投影算法。
相比之下，目前已有的算法大多考虑如何选出有效的波段或波长区间，并不会对波长点 或波长区间进行仔细地优化；精选算法则一般以各种逐步选择算法等为代表，这些算法在进 行波长选择时不仅要求选中有效的波段，还追求选用数量尽可能少的代表性波长点。
本发明先使用迭代保留信息法对预处理后的光谱进行筛选，提高了后续的波长点选择计 算的效果，再将几种波长选择算法进行并联，取其交集。实施例的这四类波长选择算法在进 行波长选择时具有一定的互补性，将其并集、集成，构建的堆叠式模型用于土壤重金属含量 的检测，提高了检测模型的精度和泛化性能，解决了单一特征变量选择方法的缺陷，能有效 提高样本的检测精度，同时检测效果的稳定性也有所提高，解决了变量区间选择方法产生的 “共线性和冗余”问题。

Claims (7)

1.基于堆叠式模型的土壤重金属含量检测方法，其特征在于，所述方法通过堆叠式模型获取土壤样本光谱的波长点，根据波长点与重金属含量的对应关系得到土壤重金属含量，堆叠式模型包括堆叠的基学习器和元学习器，所述土壤重金属含量检测方法包括以下步骤：
步骤1：采集土壤样品，配置预定重金属浓度范围的土壤样本；
步骤2：获取土壤样本的X射线荧光光谱，其中重金属元素的含量值利用化学方法标定，形成样本光谱数据集，并将样本光谱数据集分成校正集和验证集；
步骤3：利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量；
步骤4：分别从变量区间选择算法、变量优化选择算法、变量统计选择算法和变量波段选择算法中选出具有代表性的四种特征变量选择方法，在强信息变量与弱信息变量的基础上分别构建基学习器进行训练、测试；
步骤5：将基学习器集成，构建元学习器，元学习器的输入是基学习器的输出，利用基学习器的输出对元学习器进行训练、测试；
步骤6：将待检测土壤的光谱输入基学习器，依据元学习器得到待检测光谱的波长点，依据得到的波长点判断分析土壤重金属的含量。
2.根据权利要求1所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，步骤5中，选出的特征变量选择方法为区间偏最小二乘法、变量区间组合优化算法、萤火虫算法和连续投影算法。
3.根据权利要求1所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，对基学习器进行分组训练，将区间偏最小二乘法对应的基学习器和区间组合优化算法对应的基学习器作为一组进行训练，将萤火虫算法对应的基学习器和连续投影算法对应的基学习器作为另一组进行训练。
4.根据权利要求1所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，所述利用迭代保留信息法筛选出光谱中的强信息变量与弱信息变量，具体包括：
(a)对波长变量分类；
对每个波长变量计算包含和不包含该波长变量时的偏最小二乘法模型的RMSECV平均值，计算得到平均值的差值，并进行曼-惠特尼秩和检验，确定该变量的类型；
在每次迭代中保留强信息变量和弱信息变量，直至波长变量中不包含无信息变量和干扰变量为止；
(b)逆向消元；
筛选出强信息变量和弱信息变量后，考虑每个波长变量与其它波长变量的交互作用，进行逆向消元，使保留的波长变量的数量进一步减少，得到最优波长变量子集。
5.根据权利要求1所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，所述变量区间组合优化算法，包括以下步骤：
1)确定光谱区间划分数量、子模型的数量和子模型的比率；
将光谱划分为宽度相同的e个子区间，对每个光谱子区间分别建立偏最小二乘法模型预测重金属含量；
观察比较不同数量的区间划分下的试验结果，将最小的均方根误差值对应的光谱区间划分数量作为最优的子区间数量；
2)确定未进行宽度优化的波长区间；
2.1)子模型的生成，利用加权自举采样，生成M个不同波长区间随机组合形成的子集，每个波长点初始采样权重均为1，M表示采样次数，一次采样中波长z被选中的概率pz的计算式如下：
Figure FDA0003424602900000021
式中wz、wj分别表示波长z、波长j的采样权重，e表示波长点的数量；
2.2)采用偏最小二乘法算法和5折交互检验的方式，计算每个区间组合子集对应的RMSECV值；
2.3)从全部区间组合中提取比例为α的最优区间组合子集，并计算出这一部分区间组合子集对应RMSECV值的平均值，记作mRMSECV，α表示提取的区间组合占全部区间组合的比例；
2.4)统计每个区间的波长在最优区间组合子集中出现的数目，下一次迭代中第x个区间对应的采样权重如下：
Figure FDA0003424602900000022
式中fx表示第x个区间的波长在最优区间组合子集中出现的频次，kbest表示提取的最优区间组合的数目；
重复步骤2.1)至步骤2.4)进行循环迭代，直到mRMSECV出现上升，终止迭代；
2.5)将最后一次迭代中RMSECV值最小的那一组波长区间作为最终选中的波长区间。
6.根据权利要求5所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，变量区间组合优化算法划分的光谱区间的数量为15。
7.根据权利要求1所述的基于堆叠式模型的土壤重金属含量检测方法，其特征在于，所述萤火虫算法，包括以下步骤：
(I)初始化，
在可行域中随机放置n个萤火虫，并赋予每个萤火虫的荧光素为l0，动态决策域为r0；初始化步长s、领域阈值qt、荧光素消失率ρ、荧光素更新率γ、动态决策域更新率β、萤火虫感知域rs和迭代次数M；
(II)更新萤火虫i的荧光素
li(t)＝(1-ρ)li(t-1)+γJ(xi(t))
其中J(xi(t))表示萤火虫i在t时刻所在位置的目标函数值，xi(t)表示萤火虫i在t时刻的位置，li(t)、li(t-1)分别表示萤火虫i在t、t-1时刻的荧光素；
(III)寻找萤火虫i的邻居j
Figure FDA0003424602900000031
式中Ni(t)表示萤火虫i在t时刻邻居的集合，
Figure FDA0003424602900000032
表示萤火虫i在t时刻动态决策域，lj(t)表示萤火虫的邻居j在t时刻的荧光素；
(IV)确定萤火虫i移动方向
J＝argmax(pij),j∈Ni(t)，
Figure FDA0003424602900000033
其中pij表示萤火虫i向邻居j方向移动的转移概率；
(V)更新萤火虫i的位置
Figure FDA0003424602900000034
式中Xi(t+1)表示萤火虫i在t+1时刻的位置，s表示步长；
(VI)更新动态决策域
Figure FDA0003424602900000035
其中
Figure FDA0003424602900000036
表示萤火虫i在t+1时刻的动态决策域，rs表示萤火虫感知域，β表示动态决策域更新率，qt表示领域阈值。
CN202111586536.2A 2021-12-21 2021-12-21 基于堆叠式模型的土壤重金属含量检测方法 Pending CN115598162A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111586536.2A CN115598162A (zh) 2021-12-21 2021-12-21 基于堆叠式模型的土壤重金属含量检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111586536.2A CN115598162A (zh) 2021-12-21 2021-12-21 基于堆叠式模型的土壤重金属含量检测方法

Publications (1)

Publication Number Publication Date
CN115598162A true CN115598162A (zh) 2023-01-13

Family

ID=84841805

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111586536.2A Pending CN115598162A (zh) 2021-12-21 2021-12-21 基于堆叠式模型的土壤重金属含量检测方法

Country Status (1)

Country Link
CN (1) CN115598162A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117214650A (zh) * 2023-11-09 2023-12-12 深圳市美鸿电子有限公司 一种二极管综合性能智能检测方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117214650A (zh) * 2023-11-09 2023-12-12 深圳市美鸿电子有限公司 一种二极管综合性能智能检测方法及系统
CN117214650B (zh) * 2023-11-09 2024-01-26 深圳市美鸿电子有限公司 一种二极管综合性能智能检测方法及系统

Similar Documents

Publication Publication Date Title
JP6729455B2 (ja) 分析データ解析装置及び分析データ解析方法
CN106815643A (zh) 基于随机森林迁移学习的红外光谱模型传递方法
CN112052755A (zh) 基于多路注意力机制的语义卷积高光谱图像分类方法
CN109902411B (zh) 土壤重金属含量检测建模方法及装置、检测方法及装置
CN109409350B (zh) 一种基于pca建模反馈式载荷加权的波长选择方法
CN103488874A (zh) 一种改进的支持向量机结合激光诱导击穿光谱对钢铁材料的分类方法
CN107655850A (zh) 基于近红外光谱的非线性建模方法及系统
CN113607656A (zh) 一种基于高光谱成像的叶片叶绿素含量监测方法与系统
CN103278467A (zh) 一种植物叶片氮素丰缺快速无损高准确率的鉴别方法
CN115598162A (zh) 基于堆叠式模型的土壤重金属含量检测方法
WO2022001829A1 (zh) 一种改进团队进步算法的近红外光谱波长筛选方法
CN111693487A (zh) 基于遗传算法和极限学习机的水果糖度检测方法及系统
CN102128805A (zh) 果品近红外光谱波长选择和快速定量分析方法及装置
CN108827909B (zh) 基于可见近红外光谱与多目标融合的土壤快速分类方法
CN107247033B (zh) 基于快速衰减式淘汰算法和plsda鉴别黄花梨成熟度的方法
TW201321739A (zh) 訊號分析裝置、訊號分析方法及電腦程式產品
CN108663334A (zh) 基于多分类器融合寻找土壤养分光谱特征波长的方法
CN105869161A (zh) 基于图像质量评价的高光谱图像波段选择方法
CN111398238A (zh) 一种食用油掺杂蓖麻油的激光诱导荧光光谱识别方法
CN114019082B (zh) 一种土壤有机质含量监测方法和系统
CN113435115B (zh) 一种荧光光谱特征波长筛选方法、装置、计算机设备及可读储存介质
CN112881333B (zh) 一种基于改进免疫遗传算法的近红外光谱波长筛选方法
JP7203252B2 (ja) 紙巻きタバコの主流煙のスペクトルデータの官能評価方法
CN115392305A (zh) 基于改进时间卷积网络的土壤有机质含量高光谱建模方法
CN115130377A (zh) 一种boss-sapso优化极限学习机的土壤重金属预测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination