CN117932317B - 一种基于vmd-mad的长周期大地电磁信号降噪方法 - Google Patents
一种基于vmd-mad的长周期大地电磁信号降噪方法 Download PDFInfo
- Publication number
- CN117932317B CN117932317B CN202410088118.8A CN202410088118A CN117932317B CN 117932317 B CN117932317 B CN 117932317B CN 202410088118 A CN202410088118 A CN 202410088118A CN 117932317 B CN117932317 B CN 117932317B
- Authority
- CN
- China
- Prior art keywords
- signal
- period
- modal
- magnetotelluric
- mad
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 86
- 238000000354 decomposition reaction Methods 0.000 claims abstract description 18
- 238000006467 substitution reaction Methods 0.000 claims abstract description 3
- 238000004364 calculation method Methods 0.000 claims description 19
- 238000012216 screening Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 abstract description 11
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 9
- 238000004088 simulation Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 2
- 241000282414 Homo sapiens Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 230000005672 electromagnetic field Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 229910052500 inorganic mineral Inorganic materials 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000011707 mineral Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
- G06F18/2131—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on a transform domain processing, e.g. wavelet transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
Landscapes
- Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Investigating Or Analyzing Materials By The Use Of Magnetic Means (AREA)
Abstract
本发明提供了一种基于VMD‑MAD的长周期大地电磁信号降噪方法,涉及信号处理领域,包括:对获取的原始长周期大地电磁信号使用变分模态分解法进行分解,得到模态分量信号;使用相关系数法自适应筛选分类模态分量,去除其中的噪声分量信号,保留剩下的模态分量信号;预先设置区间长度,利用中位数绝对偏差法对保留的模态分量信号自适应识别离群点,并使用上下限阈值替换该离群点;对已完成离群点替换的模态分量信号进行信号重构,得到重构降噪信号。本发明的有益效果是:使用相关系数法去除大尺度干扰噪声,使用MAD法消除尖峰干扰,有效减小了这两类噪声干扰对长周期大地电磁信号的影响,提高了信号质量和长周期大地电磁法的勘探结果的准确性。
Description
技术领域
本发明涉及信号处理技术领域,尤其涉及一种基于VMD-MAD的长周期大地电磁信号降噪方法。
背景技术
上世纪50年代,Tikhonov和Cagniard提出了用于地球物理勘探的大地电磁(MT)方法,该方法以自然电磁场作为场源,通过长时间测量地表相互正交的电场分信号和磁场分量信号,根据采集的大地电磁信号可以计算得到地下电性结构。因此,此方法被广泛应用于矿产资源勘探、油气田普查、岩石圈电性结构探测等领域。由于长周期大地电磁法具有更低的频率,相比于其他物探方法具有更大的勘探深度,因此,大力发展长周期大地电磁法等勘探技术研究,有利于促进我国在深部地球勘探中的实际应用,有利于人类对地球深部的了解。
然而天然的大地电磁信号十分微弱,极容易受到各种噪声的干扰,尤其是长时间测量过程中存在的大尺度噪声干扰和尖峰噪声干扰,这些噪声信号在时域上的幅值会比大地电磁信号高出几个数量级,这使得计算的曲视电阻率-相位曲线会出现严重畸变和失真,大大影响测量结果的可靠性。国内外许多学者对如何去除有效大地电磁中噪声信号的研究十分深入,比如有最早期的用于去除同源相关噪声的远程参考大地电磁测深法,但该方法实施中选择一个合适距离的参考点是很难实现的;Vozoff和Hermance将最小二乘估计法用于阻抗估计以去除非相关噪声,该方法在处理过程中会出现额外飞点导致偏离真值;用于去除非高斯噪声的稳健估计法,该方法通过自适应加权的方式能有效减少飞点和跳点的出现,但是当噪声干扰过大时,该方法的处理会给出错误的阻抗结果。因此,结合现代数据处理技术对实测长周期大地电磁信号进行降噪处理已经成为电磁勘探领域的热门研究课题,高质量的长周期大地电磁信号是准确获得真实地下电性结构的必要前提。
发明内容
为了去除长周期大地电磁信号中的大尺度噪声和尖峰噪声,本发明提供了一种基于VMD-MAD的长周期大地电磁信号降噪方法,能够有效去除实际采集的大地电磁信号中存在的大尺度噪声干扰和尖峰噪声,极大地提高了长周期大地电磁野外采集的数据质量,对长周期大地电磁勘探方法的发展有着较大的现实意义。
该方法主要包括:
S1:对获取的原始长周期大地电磁信号使用变分模态分解法进行分解,得到模态分量信号;
S2:基于步骤S1得到的模态分量信号,使用相关系数法自适应筛选分类模态分量,用于去除其中的噪声分量信号,保留剩下的模态分量信号;
S3:预先设置区间长度,利用中位数绝对偏差法对步骤S2中保留的模态分量信号自适应识别离群点,并使用上下限阈值替换该离群点;
S4:对步骤S3中已完成离群点替换的模态分量信号进行信号重构,得到重构降噪信号,即得到降噪后长周期大地电磁信号。
进一步地,步骤S1具体为:
S11:构造变分问题
将原始长周期大地电磁信号分解为有限个的固有模态分量,其本质就是构造变分问题和求解变分问题,其约束条件为每个模态分量中心频率带宽之和最小,且各模态分量重构后就是原始信号,其约束性变分问题可表示为下式:
其中,{uq}={u1,u2...,uK}表示将原始长周期大地电磁信号分解成K个模态分量信号,k=1,2,...,K,f(t)为原始长周期大地电磁信号,{ωq}={ω1,ω2...,ωK}表示K个模态分量各自的中心频率,δ(t)表示脉冲函数;表示偏导计算,对函数求时间t的导数,*表示卷积,j表示虚数单位;
S12:变成非约束变分问题
引入二次惩罚因子α和拉格朗日乘法算子λ(t)来求解变分问题,使其变成非约束变分问题:
其中,K表示模态分量信号的个数;f(t)为原始长周期大地电磁信号;α为二次惩罚因子;<>表示内积运算;
S13:交替更新,求解变成非约束变分问题
通过交替更新来寻求变分问题的最优解,使得找到非约束变分问题的极小值点;
其中,对更新的表达式为:
对中心频率更新的表达式为:
对λ(w)n+1更新的表达式为:
其中,τ表示步长更新系数,λ(t)表示Lagrange乘法算子,ε表示给定的判别精度,n表示当前迭代次数,f(ω)、λ(ω)n+1分别表示第n+1次迭代时f(t)、λn+1(t)的傅里叶变换,ω表示中心频率;
直到满足约束条件时终止迭代,条件式迭代停止条件如下式所定义:
其中,表示第n次迭代时的傅里叶变换。
进一步地,步骤S2中,使用相关系数法筛选分类模态分量的过程为:
基于步骤S1中分解得到的K个模态分量信号,将各模态分量信号和原始长周期大地电磁信号进行相关系数的计算,得到每个模态分量的相关系数,模态分量IMF=(x1,x2,...,xm)与原始长周期大地电磁信号f(t)=(y1,y2,...,ym)的相关系数计算方法如下所示:
其中,ρxy表示相关系数,m表示原始长周期大地电磁信号的长度,μx表示一个模态分量IMF=(x1,x2,...,xm)的平均值,μy表示原始长周期大地电磁信号f(t)=(y1,y2,...,ym)的平均值,ρxy的绝对值越大,表示模态分量信号中包含的信息与原始长周期大地电磁信号的大尺度漂移噪声干扰越相关,通过比较各个模态分量计算出的相关系数,选择其中与大尺度漂移噪声干扰最大的相关系数所对应的模态分量信号,将其视作大尺度噪声干扰分量直接去除,保留剩下的模态分量信号。
进一步地,步骤S3中,实现离群点识别的过程为:
将离群点定义为在一定长度的时间序列中与中位数相差超过3倍MAD0的元素,MAD0的计算方法由下式所定义:
MAD0=c*median(|Ai-median(A)|)
其中,MAD0表示绝对中位数,c为一个常数,i为需要预先设置中位数计算的区间长度,A表示当区间长度为i时,在IMF=(x1,x2,...,xm)中所选取的时间序列,Ai表示选取时间序列中的第i点,median()表示对括号内的时间序列求解中位数,median(A)表示对时间序列A求取其中位数;
通过上述计算,有效识别出长度为i的时间序列中存在的离群点,通过依次平移该时间长度,就可以完整地遍历模态分量IMF=(x1,x2,...,xm)中的时间序列,识别出所有离群点。
进一步地,步骤S3中,实现离群点替换的过程为:
基于遍历IMF=(x1,x2,...,xm)所识别出来的离群点,使用长度为i的时间序列中上限阈值或下限阈值来替换所识别出的离群点;
其中,上限阈值为:
Upper_Thr=median(A)+3*MAD
其中,下限阈值为:
Lower_Thr=median(A)-3*MAD
当长度为i的时间序列中某个离群点的数值大于该时间序列的中位数时,该离群点的数值大于上限阈值,直接使用上限阈值替换掉该离群点;当某个离群点的数值小于该时间序列的中位数时,该离群点的数值小于下限限阈值,直接使用下限阈值替换掉这类离群点。
进一步地,步骤S4中,重构的降噪信号为:
其中,IMFsk为完成离群点替换的剩余模态分量,Out(t)为重构的降噪信号。
一种存储设备,所述存储设备存储指令及数据用于实现一种基于VMD-MAD的长周期大地电磁信号降噪方法。
一种基于VMD-MAD的长周期大地电磁信号降噪设备,包括:处理器及所述存储设备;所述处理器加载并执行所述存储设备中的指令及数据用于实现一种基于VMD-MAD的长周期大地电磁信号降噪方法。
本发明提供的技术方案带来的有益效果是:本发明充分考虑了长周期大地电磁信号中存在的两种噪声干扰的特征,针对两种噪声的不同特征,采用分步处理的方法,使用相关系数法去除大尺度干扰噪声,使用MAD法消除尖峰干扰,有效减小了这两类噪声干扰对长周期大地电磁中有效信号的影响,减少了原始信号中的噪声,提高了采集信号的数据质量,也提高了长周期大地电磁法这一物探方法勘探结果的准确性。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明实施例中一种基于VMD-MAD的长周期大地电磁信号降噪方法的流程图。
图2是本发明实施例中VMD分解方法的示意图。
图3是本发明实施例中原始仿真信号和含噪信号时域与频域的示意图。
图4是本发明实施例中VMD分解模态分量时域的示意图。
图5是本发明实施例中剩余模态分量MAD去除离群点时域的示意图。
图6是本发明实施例中重构信号时域与频域对比示意图。
图7是本发明实施例中各降噪方法处理结果时域波形对比示意图。
图8是本发明实施例中硬件设备工作的示意图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解,现对照附图详细说明本发明的具体实施方式。
请参考图1,图1是本发明实施例中一种基于VMD-MAD的长周期大地电磁信号降噪方法的流程图,首先对输入的大地电磁信号使用变分模态分解法(VMD)进行分解,接着使用相关系数法自适应筛选分类模态分量,去除其中的噪声分量信号,保留剩下的模态分量,预先设置区间长度,利用中位数绝对偏差法(MAD)对保留的模态分量信号自适应识别离群点,并使用上下限阈值替换该离群点,对完成离群点替换的各模态分量信号进行信号重构,得到重构降噪信号,并输出降噪后长周期大地电磁信号,最终完成对长周期大地电磁信号的降噪。该长周期大地电磁信号降噪方法的具体实现步骤如下:
S1:对获取的原始长周期大地电磁信号使用变分模态分解法(VMD)进行分解,得到模态分量信号;具体为:
S11:构造变分问题
将输入信号分解为有限个的固有模态分量(IMF),其本质就是构造变分问题和求解变分问题,其约束条件为每个模态分量中心频率带宽之和最小,且各模态分量重构后就是原始信号,其约束性变分问题可表示为下式:
其中,{uq}={u1,u2…,uK}表示将原始长周期大地电磁信号分解成K个模态分量,k=1,2,...,K,f(t)为输入信号,即原始长周期大地电磁信号,{ωq}={ω1,ω2…,ωK}表示K个模态分量各自的中心频率,δ(t)表示脉冲函数;表示偏导计算,对函数求时间t的导数,*表示卷积,j表示虚数单位。
S12:变成非约束变分问题
引入二次惩罚因子α和拉格朗日乘法算子λ(t)来求解变分问题,使其变成非约束变分问题,因此,上述的描述公式可以重新描述为下式:
其中:K表示模态分量个数;f(t)为输入信号;α为二次惩罚因子;<>表示内积运算。
S13:交替更新,求解变成非约束变分问题
通过交替更新λ(ω)n+1来寻求变分问题的最优解,使得找到非约束变分问题的极小值点;
其中,对更新的表达式为:
对中心频率更新的表达式为:
对λ(w)n+1更新的表达式为:
其中,τ表示步长更新系数,λ(t)表示Lagrange乘法算子,ε表示给定的判别精度,n表示当前迭代次数,f(ω)、λ(ω)n+1分别表示第n+1次迭代时f(t)、λn+1(t)的傅里叶变换,f(t)为原始信号,ω表示中心频率。
直到满足约束条件时终止迭代,条件式迭代停止条件如下式所定义:
其中,表示第n次迭代时的傅里叶变换。
在实施例中,上述变分模态分解算法的具体实现流程如图2所示。首先,需要预设模态数K,并根据经验值设置二次惩罚因子α;然后初始化更新计算uk、ωk,对变量n和k进行自增,判断k的值是否到达预设值,然后得到λ后,判断是否满足迭代停止条件,当满足条件后最终得到K个模态分量。
具体地,在实施例中,将含有多个不同频率不同振幅的正弦波信号叠加形成合成信号,用该信号模拟长周期大地电磁信号,向合成信号中随机加入大幅度方波干扰和尖峰干扰来模拟采集信号中存在的大尺度干扰和尖峰噪声,将信号转换到频域中,能更准确看出信号的被干扰程度,具体参见图3中原始仿真信号和含噪信号时域与频域示意图。
进一步的,经过步骤S1中对上述的模拟信号使用变分模态分解法(VMD)进行分解,在本次分解中,将模态数K和惩罚因子α分别预设为5和1000,经过图2中所描述的分解算法流程将图3中含噪信号分得到五个模态分量信号,在时域上的波形如图4所示。
S2:基于步骤S1得到的模态分量信号,使用相关系数法自适应筛选分类模态分量,用于去除其中的噪声分量信号,保留剩下的模态分量信号;具体如下:
基于步骤S1中分解的K个模态分量信号,将各模态分量信号和原始输入信号进行相关系数的计算,得到每个模态分量的相关系数,模态分量IMF=(x1,x2,...,xm)与原始信号f(t)=(y1,y2,...,ym)的相关系数计算方法如下式所示:
其中,ρxy代表计算出的相关系数,m表示输入信号的长度,μx表示一个模态分量IMF=(x1,x2,...,xm)的平均值,μy表示输入信号f(t)=(y1,y2,...,ym)的平均值,ρxy的绝对值越大,表示模态分量信号中包含的信息与输入信号的大尺度漂移噪声干扰越相关,通过比较各个模态分量计算出的相关系数,选择其中与大尺度漂移噪声干扰最大的相关系数所对应的分量信号,将其视作大尺度噪声干扰分量直接去除,保留剩下的模态分量信号。
本实施例中,按照相关系数定义式的计算方法,分别计算图4中5个模态分量与图3中含噪信号的相关系数,其相关系数计算值如表1所示。
表1各模态分量相关系数计算值
从表中可以看出IMF5模态分量与原始信号的相关系数是最大的,这在图4分解出的模态分量中也可以看出,IMF5分量的时域波形与加入的大尺度噪声干扰非常相似,几乎不包含有效信号。依据步骤(S2),本实施例中,直接将IMF5模态分量看成噪声模态分量,去除IMF5模态分量,保留剩余的四个模态分量作为有效分量信号,其中分解出的其他四个模态分量中出现了很多尖峰噪声的干扰,这些噪声的处理会在步骤(S3)进行。
S3:基于步骤S2中相关系数法筛选保留的模态分量信号,预先设置区间长度,利用中位数绝对偏差法(MAD)对保留的模态分量信号自适应识别离群点,并使用上下限阈值替换该离群点,具体如下:
S31:离群点识别
经过步骤(S2)的自适应筛选,得到保留后的模态分量信号。在实际采集的长周期大地电磁信号中存在很多的大尺度噪声和尖峰噪声,这些其中大尺度噪声经过步骤(S1)的VMD分解后,体现在模态分量中形式就是大尺度的平缓模态分量和大量分布在剩余模态的尖峰信号。通过步骤(S2)中的相关系数法可以筛选识别出前者的大尺度噪声,针对后者,可以使用离群点识别方法来去除。
其中,本方法中将离群点定义为在一定长度的时间序列中与中位数相差超过3倍MAD0的元素。进一步的,MAD0的计算方法由下式所定义:
MAD0=c*median(|Ai-median(A)|)
其中,MAD0表示绝对中位数,c为一个常数,本实施例中其值为其中erfcinv()表示逆互补误差函数,i为需要预先设置中位数计算的区间长度,A表示当区间长度i为时,在IMF=(x1,x2,...,xn)中所选取的时间序列,Ai表示选取时间序列中的第i点,式中median()表示对括号内的时间序列求解中位数,median(A)表示对时间序列A求取其中位数。
通过上述的计算公式,能有效识别出长度为i的时间序列中存在的离群点,通过依次平移该时间长度,就可以完整地遍历模态分量IMF=(x1,x2,...,xm)中的时间序列,识别出所有存在的离群点。
(S32)离群点替换
基于步骤(S31)遍历IMF=(x1,x2,...,xm)所识别出来的离群点,为避免离群点对整体信号的影响,需要将这些离群点剔除,并填充上一个合适的数值以保证时间序列的长度不变,本方法中使用长度为i的时间序列中上限阈值或下限阈值来替换所识别出的离群点。
其中,上限阈值由下式所定义:
Upper_Thr=median(A)+3*MAD
其中,下限阈值由下式所定义:
Lower_Thr=median(A)-3*MAD
当长度为i的时间序列中某个离群点的数值大于该时间序列的中位数时,根据步骤S31中对离群点的定义,该离群点的数值必然也大于上限阈值,因此,直接使用上限阈值替换掉该离群点。同理,当某个离群点的数值小于该时间序列的中位数时,根据步骤S31中对离群点的定义,该离群点的数值必然小于下限限阈值,直接使用下限阈值替换掉这类离群点。
基于上述对两种离群点情况分类讨论的处理,就可以完成对全部离群点识别与替换。本实施例中,需要对步骤S2中筛选出的4个模态分量分别进行离群点识别与替换,即需要对图4中的IMF1~IMF4进行处理,处理结果如图5所示,从图5中的处理结果可以看出,图4中四个模态分量的尖峰噪声被有效消除。
S4:基于步骤S3中已完成离群点替换的各模态分量信号,对完成离群点替换的模态分量信号进行信号重构,得到重构降噪信号,并输出降噪后长周期大地电磁信号,完成对长周期大地电磁信号的降噪,具体如下:
基于步骤S11中描述的约束性变分问题的定义式,所有分解出的模态分量之和构成了原始的输入信号,可表示成下式:
其中,{uq}={u1,u2...,uK}表示将原信号分解成K个模态分量,f(t)为原始的输入信号。进一步地,在步骤S2中通过相关系数法识别出大尺度干扰噪声的模态分量,并去除了该分量信号,在步骤S31和步骤S32中利用MAD完成了对剩余模态分量的离群点识别与替换,步骤消除了大尺度噪声分解得到尖峰噪声和原本存在的尖峰噪声,这些完成离群点替换的剩余模态分量信号之和,即下式所定义:
其中,IMFsk为完成离群点替换的剩余模态分量,由于步骤S2中取出来一个噪声模态分量,剩余的模态分量个数变成K-1,Out(t)即为完成降噪过程的输出信号,即重构的降噪信号。
在本实施例中,对图5中完成离群点去除的四个模态分量信号进行信号重构,得到图6中重构降噪信号,从图6中可以看出,重构降噪信号几乎与原始仿真信号相重合,在频域上也能明显地看出与原始仿真信号相同的频谱,有效地去除了加入的模拟干扰噪声。经过计算,重构降噪信号的信噪比从-19.92dB提升到了2.14dB,极大程度上提升了模拟长周期大地电磁信号的数据质量。
表2不同降噪方法对模拟长周期大地电磁信号的性能对比
表2为不同降噪方法在处理模拟长周期大地电磁信号所得结果的信噪比对比,各方法处理结果在时域上的波形对比如图7所示。其中,使用信噪比SNR和均方根误差RMSE作为算法性能的评判指标,EMD为经验模态分解法,EEMD总体经验模态分解法,然后将这两种方法与步骤S3中的MAD相结合对模拟长周期大地电磁信号进行处理。
请参见图8,图8是本发明实施例的硬件设备工作示意图,所述硬件设备具体包括:一种基于VMD-MAD的长周期大地电磁信号降噪设备401、处理器402及存储设备403。
一种基于VMD-MAD的长周期大地电磁信号降噪设备401:所述一种基于VMD-MAD的长周期大地电磁信号降噪设备401实现所述一种基于VMD-MAD的长周期大地电磁信号降噪方法。
处理器402:所述处理器402加载并执行所述存储设备403中的指令及数据用于实现所述一种基于VMD-MAD的长周期大地电磁信号降噪方法。
存储设备403:所述存储设备403存储指令及数据;所述存储设备403用于实现所述一种基于VMD-MAD的长周期大地电磁信号降噪方法。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.一种基于VMD-MAD的长周期大地电磁信号降噪方法,其特征在于:包括:
S1:对获取的原始长周期大地电磁信号使用变分模态分解法进行分解,得到模态分量信号;
S11:构造变分问题
将原始长周期大地电磁信号分解为有限个的固有模态分量,其本质就是构造变分问题和求解变分问题,其约束条件为每个模态分量中心频率带宽之和最小,且各模态分量重构后就是原始信号,其约束性变分问题可表示为下式:
其中,{uq}={u1,u2…,uK}表示将原始长周期大地电磁信号分解成K个模态分量信号,k=1,2,...,K,f(t)为原始长周期大地电磁信号,{ωq}={ω1,ω2…,ωK}表示K个模态分量各自的中心频率,δ(t)表示脉冲函数;表示偏导计算,对函数求时间t的导数,*表示卷积,j表示虚数单位;
S12:变成非约束变分问题
引入二次惩罚因子α和拉格朗日乘法算子λ(t)来求解变分问题,使其变成非约束变分问题:
其中,K表示模态分量信号的个数;f(t)为原始长周期大地电磁信号;α为二次惩罚因子;<>表示内积运算;
S13:交替更新,求解变成非约束变分问题
通过交替更新λ(ω)n+1来寻求变分问题的最优解,使得找到非约束变分问题的极小值点;
其中,对更新的表达式为:
对中心频率更新的表达式为:
对λ(w)n+1更新的表达式为:
其中,τ表示步长更新系数,λ(t)表示Lagrange乘法算子,ε表示给定的判别精度,n表示当前迭代次数,f(ω)、λ(ω)n+1分别表示第n+1次迭代时f(t)、λn+1(t)的傅里叶变换,ω表示中心频率;
直到满足约束条件时终止迭代,条件式迭代停止条件如下式所定义:
其中,表示第n次迭代时的傅里叶变换;
S2:基于步骤S1得到的模态分量信号,使用相关系数法自适应筛选分类模态分量,用于去除其中的噪声分量信号,保留剩下的模态分量信号;
使用相关系数法筛选分类模态分量的过程为:
基于步骤S1中分解得到的K个模态分量信号,将各模态分量信号和原始长周期大地电磁信号进行相关系数的计算,得到每个模态分量的相关系数,模态分量IMF=(x1,x2,...,xm)与原始长周期大地电磁信号f(t)=(y1,y2,...,ym)的相关系数计算方法如下所示:
其中,ρxy表示相关系数,m表示原始长周期大地电磁信号的长度,μx表示一个模态分量IMF=(x1,x2,...,xm)的平均值,μy表示原始长周期大地电磁信号f(t)=(y1,y2,...,ym)的平均值,ρxy的绝对值越大,表示模态分量信号中包含的信息与原始长周期大地电磁信号的大尺度漂移噪声干扰越相关,通过比较各个模态分量计算出的相关系数,选择其中与大尺度漂移噪声干扰最大的相关系数所对应的模态分量信号,将其视作大尺度噪声干扰分量直接去除,保留剩下的模态分量信号;
S3:预先设置区间长度,利用中位数绝对偏差法对步骤S2中保留的模态分量信号自适应识别离群点,并使用上下限阈值替换该离群点;
实现离群点识别的过程为:
将离群点定义为在一定长度的时间序列中与中位数相差超过3倍MAD0的元素,MAD0的计算方法由下式所定义:
MAD0=c*median(|Ai-median(A)|)
其中,MAD0表示绝对中位数,c为一个常数,i为需要预先设置中位数计算的区间长度,A表示当区间长度为i时,在IMF=(x1,x2,...,xm)中所选取的时间序列,Ai表示选取时间序列中的第i点,median()表示对括号内的时间序列求解中位数,median(A)表示对时间序列A求取其中位数;
通过上述计算,有效识别出长度为i的时间序列中存在的离群点,通过依次平移该时间长度,就可以完整地遍历模态分量IMF=(x1,x2,...,xm)中的时间序列,识别出所有离群点;
S4:对步骤S3中已完成离群点替换的模态分量信号进行信号重构,得到重构降噪信号,即得到降噪后长周期大地电磁信号。
2.如权利要求1所述的一种基于VMD-MAD的长周期大地电磁信号降噪方法,其特征在于:步骤S3中,实现离群点替换的过程为:
基于遍历IMF=(x1,x2,...,xm)所识别出来的离群点,使用长度为i的时间序列中上限阈值或下限阈值来替换所识别出的离群点;
其中,上限阈值为:
Upper_Thr=median(A)+3*MAD
其中,下限阈值为:
Lower_Thr=median(A)-3*MAD
当长度为i的时间序列中某个离群点的数值大于该时间序列的中位数时,该离群点的数值大于上限阈值,直接使用上限阈值替换掉该离群点;当某个离群点的数值小于该时间序列的中位数时,该离群点的数值小于下限限阈值,直接使用下限阈值替换掉这类离群点。
3.如权利要求1所述的一种基于VMD-MAD的长周期大地电磁信号降噪方法,其特征在于:步骤S4中,重构的降噪信号为:
其中,IMFsk为完成离群点替换的剩余模态分量,Out(t)为重构的降噪信号。
4.一种存储设备,其特征在于:所述存储设备存储指令及数据用于实现权利要求1~3任一项所述的基于VMD-MAD的长周期大地电磁信号降噪方法。
5.一种基于VMD-MAD的长周期大地电磁信号降噪设备,其特征在于:包括:处理器及存储设备;所述处理器加载并执行所述存储设备中的指令及数据用于实现权利要求1~3任一项所述的基于VMD-MAD的长周期大地电磁信号降噪方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410088118.8A CN117932317B (zh) | 2024-01-22 | 2024-01-22 | 一种基于vmd-mad的长周期大地电磁信号降噪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410088118.8A CN117932317B (zh) | 2024-01-22 | 2024-01-22 | 一种基于vmd-mad的长周期大地电磁信号降噪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117932317A CN117932317A (zh) | 2024-04-26 |
CN117932317B true CN117932317B (zh) | 2024-08-30 |
Family
ID=90756871
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410088118.8A Active CN117932317B (zh) | 2024-01-22 | 2024-01-22 | 一种基于vmd-mad的长周期大地电磁信号降噪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117932317B (zh) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109654384B (zh) * | 2019-01-29 | 2024-04-02 | 南京工业大学 | 基于pso-vmd算法的管道泄漏检测装置及检测方法 |
CN110659621A (zh) * | 2019-09-27 | 2020-01-07 | 山东科技大学 | 一种基于变分模态分解和排列熵的联合降噪方法 |
CN112990139A (zh) * | 2021-04-29 | 2021-06-18 | 青岛科技大学 | 基于变模态分解加权重构信号结合小波阈值去噪方法 |
CN114611329B (zh) * | 2022-04-01 | 2023-09-26 | 长江大学 | 一种基于变分模态分解的时域电磁法近场噪声压制方法 |
CN115577241A (zh) * | 2022-10-08 | 2023-01-06 | 西安科技大学 | 一种基于短时窗均值-vmd算法的惯导非平稳信号降噪方法 |
-
2024
- 2024-01-22 CN CN202410088118.8A patent/CN117932317B/zh active Active
Non-Patent Citations (1)
Title |
---|
Noise Reduction Method for Long Period Magnetotelluric Signals Based on VMD-Wavelet Thresholding;Xin Ke等;《2023 3rd International Conference on Computer Science, Electronic Information Engineering and Intelligent Control Technology (CEI)》;20240515;574-577 * |
Also Published As
Publication number | Publication date |
---|---|
CN117932317A (zh) | 2024-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Gómez et al. | A simple method inspired by empirical mode decomposition for denoising seismic data | |
Ansari et al. | Correction of highly noisy strong motion records using a modified wavelet de-noising method | |
Liu et al. | Seismic data interpolation beyond aliasing using regularized nonstationary autoregression | |
Gabarda et al. | Detection of events in seismic time series by time–frequency methods | |
CN108267784A (zh) | 一种地震信号随机噪声压制处理方法 | |
Dong et al. | Signal-to-noise ratio enhancement for 3C downhole microseismic data based on the 3D shearlet transform and improved back-propagation neural networks | |
CN102819043B (zh) | 阵列信号随机噪声自适应模型去噪方法 | |
Zhong et al. | A study on the stationarity and Gaussianity of the background noise in land-seismic prospecting | |
CN102681014A (zh) | 基于多项式拟合的规则线性干扰压制方法 | |
CN113642484B (zh) | 一种基于bp神经网络的大地电磁信号噪声压制方法及系统 | |
Wang et al. | Self-training and learning the waveform features of microseismic data using an adaptive dictionary | |
Zhang et al. | Signal preserving and seismic random noise attenuation by Hurst exponent based time–frequency peak filtering | |
Kremer et al. | Review of acquisition and signal processing methods for electromagnetic noise reduction and retrieval of surface nuclear magnetic resonance parameters | |
CN113109289A (zh) | 最优小波去噪组合的选取方法及THz光谱去噪方法 | |
CN114970646B (zh) | 一种人工源电磁伪随机信号去趋势和噪声识别方法 | |
CN113887398A (zh) | 一种基于变分模态分解和奇异谱分析的gpr信号去噪方法 | |
CN112882115A (zh) | 基于gwo优化小波阈值的大地电磁信号去噪方法及系统 | |
CN108169795A (zh) | 基于随机采样的数据规则化方法 | |
Li et al. | Magnetotelluric noise suppression via convolutional neural network | |
CN112817056B (zh) | 一种大地电磁信号去噪方法及系统 | |
Li et al. | Magnetotelluric signal-noise separation method based on SVM–CEEMDWT | |
CN117932317B (zh) | 一种基于vmd-mad的长周期大地电磁信号降噪方法 | |
CN109765608A (zh) | 一种基于联合字典的煤层巷道锚杆振动噪声压制方法 | |
CN110287853B (zh) | 一种基于小波分解的暂态信号去噪方法 | |
CN116626760A (zh) | 基于自适应高阶最大熵wvd的地层不连续性检测方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |