CN101957458B - 一种处理超低频数据的方法 - Google Patents

一种处理超低频数据的方法 Download PDF

Info

Publication number
CN101957458B
CN101957458B CN 200910088877 CN200910088877A CN101957458B CN 101957458 B CN101957458 B CN 101957458B CN 200910088877 CN200910088877 CN 200910088877 CN 200910088877 A CN200910088877 A CN 200910088877A CN 101957458 B CN101957458 B CN 101957458B
Authority
CN
China
Prior art keywords
data
ultralow frequency
processing
frequency data
dma passage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN 200910088877
Other languages
English (en)
Other versions
CN101957458A (zh
Inventor
秦其明
王清培
崔容菠
张泽勋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Peking University
Original Assignee
Peking University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Peking University filed Critical Peking University
Priority to CN 200910088877 priority Critical patent/CN101957458B/zh
Publication of CN101957458A publication Critical patent/CN101957458A/zh
Application granted granted Critical
Publication of CN101957458B publication Critical patent/CN101957458B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Complex Calculations (AREA)
  • Geophysics And Detection Of Objects (AREA)

Abstract

本发明公开了一种处理超低频数据的方法,属于超低频电磁波信号采集、处理技术领域。该方法利用DSP处理器对超低频探测数据进行并行读取;对同一测点、相同参数多次重复探测的数据进行叠加,并进行小波去噪;将小波去噪处理后的数据进行包络线滤波处理,得到结果数据。本发明通过DSP数字处理器实现超低频数据处理算法,包括滤波处理和去噪处理,具有算法并行度高,迭代过程快等优点,能够更高效的实现超低频数据处理,得到信噪比高的处理结果。

Description

一种处理超低频数据的方法
技术领域
本发明是关于超低频电磁波信号采集、处理技术,具体涉及一种超低频数据的处理方法。
背景技术
超低频电磁探测技术已经广泛用于地震监测、石油天然气与煤层气等资源勘探、采空区或地下水探测等领域。该探测技术包括:被动接受来自地下反射的天然场源的超低频电磁波信号,通过处理、分析和解释该信号来实现对地下物质的探测。被动式探测应用的效果极大地依赖于超低频数据处理软、硬件的设计和性能。
目前,超低频数据处理软件基本上只能完成数据采集、处理、正反演、成果输出、现场解释成果图等。数据处理过程中,还需将野外采集到的数据转移到实验室进行处理、分析,因此实时性较差;而且,超低频电磁信号的数据处理涉及大量的运算,数据处理的效果主要依赖于编译器和X86处理器的性能,由于X86的处理器的局限性,大量的乘法运算和累加运算往往需要消耗大量的资源。
发明内容
本发明针对现有技术中的超低频数据处理效率低的问题,提供了一种基于DSP的超低频数据的处理方法,可有效地提高数据处理效率。
本发明的技术方案是:
一种超低频数据的处理方法,其步骤包括:
1-1)利用DSP处理器对超低频数据进行并行读取;
1-2)对同一测点、相同参数的多次重复探测的数据进行叠加,并进行小波去噪;
1-3)将上述步骤处理后的数据曲线进行包络线滤波处理,得到结果数据。
所述步骤1-1)包括:对超低频数据的头文件进行格式分析,预先分配多路通道,计算文件地址空间,然后利用DMA通道对超低频数据进行并行读取。
针对被动式超低频数据,读取其头文件的MagicNUM字段,检测文件校验位checksum,以确保数据没有被损坏,随后根据探测起始深度、截止深度和步长计算头文件的数据块数,利用该数据块数,计算各数据块的地址偏移量,最后通过DMA通道帧的大小,计算出每个数据块所需要的DMA通道帧数。
DSP处理器将DMA通道帧数与帧大小写入传输计数寄存器,随后初始化DMA通道,利用全局索引寄存器进行DMA通道传送。
所述步骤1-2)具体包括:
5-1)将同一测点、相同参数的多次重复探测的数据叠加起来,求其平均值用以去除随机噪声;
5-2)然后对叠加去噪后的数据进行多个尺度的离散小波变换,得到若干个尺度的小波系数;
5-3)对上述小波系数作逆变换,得到最终的降噪后的数据。
在所述步骤5-2)中,对小波系数进行自适应阈值处理,得到估计小波系数。
所述步骤1-3)具体包括:计算超低频数据曲线的极大值点和极小值点,依次连接,生成极大值和极小值对应的上、下两条包络线;计算每个探测深度对应的上包络线和下包络线振幅的均值,作为该探测深度对应的结果数据。
对于生成的两条上、下包络线进行修正。具体的方法为,分别计算上下包络线和原始曲线的距离,然后阈值判断,确定是否用原始曲线替换。以极大值包络线为例,首先计算两个相邻的极大值点之间的包络线和原始曲线的差值,选择其中最大的差值作为该段包络线和原始曲线的距离,如果该距离大于设定的阈值,则将用原始曲线的值来代替极大值包络线。
阈值可以选择为原始曲线最大值和最小值的差的30%-40%。
与现有技术相比,本发明的有益效果是:
本发明通过理论分析、实验测试和实际应用,充分利用DSP的控制、处理能力和图形功能,以硬件控制技术为关键,在吸取传统超低频信号处理系统优点的基础上,通过DSP数字处理器实现超低频数据处理算法,包括去噪处理和滤波处理,具有算法并行度高,迭代过程快等优点,相比X86架构的处理器,能够更高效的实现超低频数据处理,得到信噪比较高的处理结果。
基于DSP实现的这种超低频数据处理系统,充分发挥了DSP器件的性能优势,具有编程灵活、操作简单、体积小巧、硬件结构简单、测量精度高、测量范围宽、响应速度快、使用方便的优点。因此,比传统的数据处理系统的适用面更加宽广,有广阔的应用前景。
附图说明
图1为超低频数据的文件格式;
图2为本发明数据处理流程图;
图3为本发明基于小波的叠加去噪处理流程图;
图4为本发明包络线滤波处理流程图。
具体实施方式
下面结合附图对本发明作进一步详细描述:
以探测所得100-1000米深度,步长5米的超低频数据文件夹为例。该文件夹内含10次采集数据。分别为1.raw,2.raw,3,raw...10.raw。
如图1所示,数据头header格式如下:
Struct header{
Char MagicNUM[4];
Char name[10];
Int btime;
Int etime;
Int lfrom;
Int lto;
Int gap;
}
读取MagicNUM字段,检测文件合理性(0x55AA)。检测文件校验位checksum,确保数据没有被损坏。根据lfrom(起始深度),lto(截止深度),和gap(步长)计算文件的数据块数,共有180块数据块。根据数据的块数,计算各数据块的地址偏移量。根据数据块的大小以及DMA通道帧的大小计算每个数据块所需要的DMA通道帧数。即合理计算各数据块起始地址分别为:40,80,120等,预先分配10路通道,根据计算出的通道数和各数据块地址空间,利用DMA通道对超低频数据进行并行的10次读取。对文件2.raw-10.raw采取同样步骤读取操作。
参考图2,DSP处理器对同一测点、相同参数多次重复测量的数据进行叠加,并采用自适应小波去噪,将小波去噪处理后的数据进行包络线滤波处理,最终得到信噪比较高的处理结果。
在DSP上对读取的重复探测的数据进行叠加处理后进行自适应的小波去噪,如图3所示,具体包括:
1、对读入的多次重复的探测数据叠加起来,求其平均值作为叠加处理的结果;
2、然后对叠加去噪后的数据进行几个尺度的离散小波变换,得到各种尺度的小波系数;
3、对各个尺度的小波系数进行自适应阈值处理,得出估计小波系数;
4、对处理过的小波系数作逆变换,得到最终的去噪后的数据曲线。
对去噪后数据进行包络线滤波,如图4所示。
1)首先计算去噪后的超低频曲线的极大值点和极小值点,依次连接,分别生成极大值和极小值的上、下两条包络线;
2)对于生成的两条上下包络线进行修正,如对极大值包络线,首先计算两个相邻的极大值点之间的包络线和原始曲线的差值,选择其中最大的差值作为该段包络线和原始曲线的距离,如果该距离大于一个设定的阈值(如设定为原始曲线最大值和最小值的差的40%),则将用原始曲线的值来代替极大值包络线。
3)计算各段包络线的距离,然后阈值判断,确定是否用原始曲线替换,重复以上步骤,遍历整条包络线。对极小值包络也采用同样的操作。
4)最后,用修正后的上、下包络线,求每个深度数据对应的上包络线和下包络线的振幅,计算其振幅的均值作为结果数据曲线。
以上通过详细实施例描述了本发明所提供的超低频数据的处理方法,本领域的技术人员应当理解,在不脱离本发明实质的范围内,可以对本发明做一定的变形或修改;不限于实施例中所公开的内容。

Claims (5)

1.一种超低频数据的处理方法,其步骤包括:
1—1)利用DSP处理器对超低频数据进行并行读取;
1—2)对同一测点、相同参数的多次重复探测的数据进行叠加,并进行小波去噪;
1—3)将上述步骤处理后的数据曲线进行包络线滤波处理,得到结果数据;
所述步骤1—1)包括:对超低频数据的头文件进行格式分析,预先分配多路通道,计算文件地址空间,然后利用DMA通道对超低频数据进行并行读取;针对被动式超低频数据,读取其头文件的MagicNUM字段,检测文件校验位checksum,以确保数据没有被损坏,随后根据起始深度、截止深度和步长计算头文件的数据块数,利用该数据块数,计算各数据块的地址偏移量,最后通过DMA通道帧的大小,计算出每个数据块所需要的DMA通道帧数;
所述步骤1—2)具体包括:
1—2—1)将同一测点、相同参数的多次重复探测的数据叠加起来,求其平均值用以去除随机噪声;
1—2—2)然后对叠加去噪后的数据进行多个尺度的离散小波变换,得到若干个尺度的小波系数;
1—2—3)对上述小波系数作逆变换,得到最终的降噪后的数据;
所述步骤1-3)具体包括:计算超低频数据曲线的极大值点和极小值点,依次连接,生成极大值和极小值对应的上、下两条包络线;计算每个探测深度对应的上包络线和下包络线振幅的均值,作为该探测深度对应的结果数据。
2.如权利要求1所述的方法,其特征在于,DSP处理器将DMA通道帧数与帧大小写入传输计数寄存器,随后初始化DMA通道,利用全局索引寄存器进行DMA通道传送。
3.如权利要求1所述的方法,其特征在于,在所述步骤1-2-2)中,对小波系数进行自适应阈值处理。
4.如权利要求1所述的方法,其特征在于,分别计算上下包络线和原始曲线的距离,进行阈值判断。
5.如权利要求4所述的方法,其特征在于,阈值为原始曲线的最大值和最小值差的30%-40%。
CN 200910088877 2009-07-21 2009-07-21 一种处理超低频数据的方法 Active CN101957458B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200910088877 CN101957458B (zh) 2009-07-21 2009-07-21 一种处理超低频数据的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200910088877 CN101957458B (zh) 2009-07-21 2009-07-21 一种处理超低频数据的方法

Publications (2)

Publication Number Publication Date
CN101957458A CN101957458A (zh) 2011-01-26
CN101957458B true CN101957458B (zh) 2013-08-07

Family

ID=43484896

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200910088877 Active CN101957458B (zh) 2009-07-21 2009-07-21 一种处理超低频数据的方法

Country Status (1)

Country Link
CN (1) CN101957458B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486614A (zh) * 2014-12-10 2015-04-01 央视国际网络无锡有限公司 Mp4视频格式损坏检测方法
CN106547025A (zh) * 2015-09-22 2017-03-29 中国石油化工股份有限公司 一种均值加权去噪方法
CN105182429B (zh) * 2015-09-29 2017-09-29 吉林大学 一种海洋可控源电磁数据海水扰动噪声校正方法
CN106200381B (zh) * 2016-07-27 2019-09-20 华电水务科技股份有限公司 一种根据处理水量分阶段控制水厂运行的方法
CN117289276B (zh) * 2023-11-24 2024-02-27 航天宏图信息技术股份有限公司 Sar图像的处理方法、装置、电子设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1256490A (zh) * 1998-10-27 2000-06-14 松下电器产业株式会社 波形整形设备和包括该设备的再现信号处理设备
CN2764072Y (zh) * 2004-12-30 2006-03-08 西安交通大学 基于dsp的网络化设备智能监测装置
CN101442512A (zh) * 2008-12-19 2009-05-27 西安电子科技大学 Ofdm信号的识别方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1256490A (zh) * 1998-10-27 2000-06-14 松下电器产业株式会社 波形整形设备和包括该设备的再现信号处理设备
CN2764072Y (zh) * 2004-12-30 2006-03-08 西安交通大学 基于dsp的网络化设备智能监测装置
CN101442512A (zh) * 2008-12-19 2009-05-27 西安电子科技大学 Ofdm信号的识别方法

Also Published As

Publication number Publication date
CN101957458A (zh) 2011-01-26

Similar Documents

Publication Publication Date Title
CN101957458B (zh) 一种处理超低频数据的方法
CN102636577B (zh) 一种基于小波变换提取轮辋超声波探伤信号的方法
CN102832908B (zh) 基于小波变换与变步长lms自适应滤波的信号降噪方法
CN103487835B (zh) 一种基于模型约束的多分辨率波阻抗反演方法
CN101586997A (zh) 一种拉索振动基频的计算方法
CN104897780B (zh) 一种利用声发射信号能量对声发射源进行定位的方法
CN106596724B (zh) 一种窄带Lamb波检测数据稀疏压缩优化重建方法
CN103398295B (zh) 一种管道漏磁信号数据压缩装置及方法
CN101701934A (zh) Acfm缺陷智能可视化检测系统
CN102508031A (zh) 一种基于傅里叶级数的局部放电脉冲相角测量方法
CN103163567B (zh) 基于能量的气枪子波气泡比分析方法及装置
CN102809687B (zh) 一种交流电频率的数字化测量方法
CN102176121A (zh) 数字超声经颅多普勒数字解调和信号处理方法及装置
CN109063762A (zh) 一种基于dt-cwt和s4vm的管道堵塞故障识别方法
CN100464185C (zh) 混凝土超声层析成像算法
CN204330664U (zh) 管道内泥浆浓度电容式测量装置
CN109187769A (zh) 一种基于超声导波定量化检测管道缺陷的方法
CN106769734B (zh) 一种超声波聚焦式河流泥沙浓度在线测量方法
CN114721037A (zh) 一种智能声学技术对管道内特征的检测、定位与识别方法
CN113189641B (zh) 一种两道多模式瑞利波地下探测系统及方法
CN102853902B (zh) 一种非接触测量边界振动的方法及应用
CN104422953B (zh) 一种提高地震叠前时间偏移计算效率的方法
CN117688369A (zh) 基于das的注浆管道数据降噪方法
CN103033154A (zh) 一种用于提高超声检测时间分辨率的自回归谱分析方法
CN102707288B (zh) 超声波回波时间的检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant