CN101957458B - 一种处理超低频数据的方法 - Google Patents
一种处理超低频数据的方法 Download PDFInfo
- Publication number
- CN101957458B CN101957458B CN 200910088877 CN200910088877A CN101957458B CN 101957458 B CN101957458 B CN 101957458B CN 200910088877 CN200910088877 CN 200910088877 CN 200910088877 A CN200910088877 A CN 200910088877A CN 101957458 B CN101957458 B CN 101957458B
- Authority
- CN
- China
- Prior art keywords
- data
- ultralow frequency
- processing
- frequency data
- dma passage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Complex Calculations (AREA)
- Geophysics And Detection Of Objects (AREA)
Abstract
本发明公开了一种处理超低频数据的方法,属于超低频电磁波信号采集、处理技术领域。该方法利用DSP处理器对超低频探测数据进行并行读取;对同一测点、相同参数多次重复探测的数据进行叠加,并进行小波去噪;将小波去噪处理后的数据进行包络线滤波处理,得到结果数据。本发明通过DSP数字处理器实现超低频数据处理算法,包括滤波处理和去噪处理,具有算法并行度高,迭代过程快等优点,能够更高效的实现超低频数据处理,得到信噪比高的处理结果。
Description
技术领域
本发明是关于超低频电磁波信号采集、处理技术,具体涉及一种超低频数据的处理方法。
背景技术
超低频电磁探测技术已经广泛用于地震监测、石油天然气与煤层气等资源勘探、采空区或地下水探测等领域。该探测技术包括:被动接受来自地下反射的天然场源的超低频电磁波信号,通过处理、分析和解释该信号来实现对地下物质的探测。被动式探测应用的效果极大地依赖于超低频数据处理软、硬件的设计和性能。
目前,超低频数据处理软件基本上只能完成数据采集、处理、正反演、成果输出、现场解释成果图等。数据处理过程中,还需将野外采集到的数据转移到实验室进行处理、分析,因此实时性较差;而且,超低频电磁信号的数据处理涉及大量的运算,数据处理的效果主要依赖于编译器和X86处理器的性能,由于X86的处理器的局限性,大量的乘法运算和累加运算往往需要消耗大量的资源。
发明内容
本发明针对现有技术中的超低频数据处理效率低的问题,提供了一种基于DSP的超低频数据的处理方法,可有效地提高数据处理效率。
本发明的技术方案是:
一种超低频数据的处理方法,其步骤包括:
1-1)利用DSP处理器对超低频数据进行并行读取;
1-2)对同一测点、相同参数的多次重复探测的数据进行叠加,并进行小波去噪;
1-3)将上述步骤处理后的数据曲线进行包络线滤波处理,得到结果数据。
所述步骤1-1)包括:对超低频数据的头文件进行格式分析,预先分配多路通道,计算文件地址空间,然后利用DMA通道对超低频数据进行并行读取。
针对被动式超低频数据,读取其头文件的MagicNUM字段,检测文件校验位checksum,以确保数据没有被损坏,随后根据探测起始深度、截止深度和步长计算头文件的数据块数,利用该数据块数,计算各数据块的地址偏移量,最后通过DMA通道帧的大小,计算出每个数据块所需要的DMA通道帧数。
DSP处理器将DMA通道帧数与帧大小写入传输计数寄存器,随后初始化DMA通道,利用全局索引寄存器进行DMA通道传送。
所述步骤1-2)具体包括:
5-1)将同一测点、相同参数的多次重复探测的数据叠加起来,求其平均值用以去除随机噪声;
5-2)然后对叠加去噪后的数据进行多个尺度的离散小波变换,得到若干个尺度的小波系数;
5-3)对上述小波系数作逆变换,得到最终的降噪后的数据。
在所述步骤5-2)中,对小波系数进行自适应阈值处理,得到估计小波系数。
所述步骤1-3)具体包括:计算超低频数据曲线的极大值点和极小值点,依次连接,生成极大值和极小值对应的上、下两条包络线;计算每个探测深度对应的上包络线和下包络线振幅的均值,作为该探测深度对应的结果数据。
对于生成的两条上、下包络线进行修正。具体的方法为,分别计算上下包络线和原始曲线的距离,然后阈值判断,确定是否用原始曲线替换。以极大值包络线为例,首先计算两个相邻的极大值点之间的包络线和原始曲线的差值,选择其中最大的差值作为该段包络线和原始曲线的距离,如果该距离大于设定的阈值,则将用原始曲线的值来代替极大值包络线。
阈值可以选择为原始曲线最大值和最小值的差的30%-40%。
与现有技术相比,本发明的有益效果是:
本发明通过理论分析、实验测试和实际应用,充分利用DSP的控制、处理能力和图形功能,以硬件控制技术为关键,在吸取传统超低频信号处理系统优点的基础上,通过DSP数字处理器实现超低频数据处理算法,包括去噪处理和滤波处理,具有算法并行度高,迭代过程快等优点,相比X86架构的处理器,能够更高效的实现超低频数据处理,得到信噪比较高的处理结果。
基于DSP实现的这种超低频数据处理系统,充分发挥了DSP器件的性能优势,具有编程灵活、操作简单、体积小巧、硬件结构简单、测量精度高、测量范围宽、响应速度快、使用方便的优点。因此,比传统的数据处理系统的适用面更加宽广,有广阔的应用前景。
附图说明
图1为超低频数据的文件格式;
图2为本发明数据处理流程图;
图3为本发明基于小波的叠加去噪处理流程图;
图4为本发明包络线滤波处理流程图。
具体实施方式
下面结合附图对本发明作进一步详细描述:
以探测所得100-1000米深度,步长5米的超低频数据文件夹为例。该文件夹内含10次采集数据。分别为1.raw,2.raw,3,raw...10.raw。
如图1所示,数据头header格式如下:
Struct header{
Char MagicNUM[4];
Char name[10];
Int btime;
Int etime;
Int lfrom;
Int lto;
Int gap;
}
读取MagicNUM字段,检测文件合理性(0x55AA)。检测文件校验位checksum,确保数据没有被损坏。根据lfrom(起始深度),lto(截止深度),和gap(步长)计算文件的数据块数,共有180块数据块。根据数据的块数,计算各数据块的地址偏移量。根据数据块的大小以及DMA通道帧的大小计算每个数据块所需要的DMA通道帧数。即合理计算各数据块起始地址分别为:40,80,120等,预先分配10路通道,根据计算出的通道数和各数据块地址空间,利用DMA通道对超低频数据进行并行的10次读取。对文件2.raw-10.raw采取同样步骤读取操作。
参考图2,DSP处理器对同一测点、相同参数多次重复测量的数据进行叠加,并采用自适应小波去噪,将小波去噪处理后的数据进行包络线滤波处理,最终得到信噪比较高的处理结果。
在DSP上对读取的重复探测的数据进行叠加处理后进行自适应的小波去噪,如图3所示,具体包括:
1、对读入的多次重复的探测数据叠加起来,求其平均值作为叠加处理的结果;
2、然后对叠加去噪后的数据进行几个尺度的离散小波变换,得到各种尺度的小波系数;
3、对各个尺度的小波系数进行自适应阈值处理,得出估计小波系数;
4、对处理过的小波系数作逆变换,得到最终的去噪后的数据曲线。
对去噪后数据进行包络线滤波,如图4所示。
1)首先计算去噪后的超低频曲线的极大值点和极小值点,依次连接,分别生成极大值和极小值的上、下两条包络线;
2)对于生成的两条上下包络线进行修正,如对极大值包络线,首先计算两个相邻的极大值点之间的包络线和原始曲线的差值,选择其中最大的差值作为该段包络线和原始曲线的距离,如果该距离大于一个设定的阈值(如设定为原始曲线最大值和最小值的差的40%),则将用原始曲线的值来代替极大值包络线。
3)计算各段包络线的距离,然后阈值判断,确定是否用原始曲线替换,重复以上步骤,遍历整条包络线。对极小值包络也采用同样的操作。
4)最后,用修正后的上、下包络线,求每个深度数据对应的上包络线和下包络线的振幅,计算其振幅的均值作为结果数据曲线。
以上通过详细实施例描述了本发明所提供的超低频数据的处理方法,本领域的技术人员应当理解,在不脱离本发明实质的范围内,可以对本发明做一定的变形或修改;不限于实施例中所公开的内容。
Claims (5)
1.一种超低频数据的处理方法,其步骤包括:
1—1)利用DSP处理器对超低频数据进行并行读取;
1—2)对同一测点、相同参数的多次重复探测的数据进行叠加,并进行小波去噪;
1—3)将上述步骤处理后的数据曲线进行包络线滤波处理,得到结果数据;
所述步骤1—1)包括:对超低频数据的头文件进行格式分析,预先分配多路通道,计算文件地址空间,然后利用DMA通道对超低频数据进行并行读取;针对被动式超低频数据,读取其头文件的MagicNUM字段,检测文件校验位checksum,以确保数据没有被损坏,随后根据起始深度、截止深度和步长计算头文件的数据块数,利用该数据块数,计算各数据块的地址偏移量,最后通过DMA通道帧的大小,计算出每个数据块所需要的DMA通道帧数;
所述步骤1—2)具体包括:
1—2—1)将同一测点、相同参数的多次重复探测的数据叠加起来,求其平均值用以去除随机噪声;
1—2—2)然后对叠加去噪后的数据进行多个尺度的离散小波变换,得到若干个尺度的小波系数;
1—2—3)对上述小波系数作逆变换,得到最终的降噪后的数据;
所述步骤1-3)具体包括:计算超低频数据曲线的极大值点和极小值点,依次连接,生成极大值和极小值对应的上、下两条包络线;计算每个探测深度对应的上包络线和下包络线振幅的均值,作为该探测深度对应的结果数据。
2.如权利要求1所述的方法,其特征在于,DSP处理器将DMA通道帧数与帧大小写入传输计数寄存器,随后初始化DMA通道,利用全局索引寄存器进行DMA通道传送。
3.如权利要求1所述的方法,其特征在于,在所述步骤1-2-2)中,对小波系数进行自适应阈值处理。
4.如权利要求1所述的方法,其特征在于,分别计算上下包络线和原始曲线的距离,进行阈值判断。
5.如权利要求4所述的方法,其特征在于,阈值为原始曲线的最大值和最小值差的30%-40%。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910088877 CN101957458B (zh) | 2009-07-21 | 2009-07-21 | 一种处理超低频数据的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200910088877 CN101957458B (zh) | 2009-07-21 | 2009-07-21 | 一种处理超低频数据的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101957458A CN101957458A (zh) | 2011-01-26 |
CN101957458B true CN101957458B (zh) | 2013-08-07 |
Family
ID=43484896
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200910088877 Active CN101957458B (zh) | 2009-07-21 | 2009-07-21 | 一种处理超低频数据的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101957458B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104486614A (zh) * | 2014-12-10 | 2015-04-01 | 央视国际网络无锡有限公司 | Mp4视频格式损坏检测方法 |
CN106547025A (zh) * | 2015-09-22 | 2017-03-29 | 中国石油化工股份有限公司 | 一种均值加权去噪方法 |
CN105182429B (zh) * | 2015-09-29 | 2017-09-29 | 吉林大学 | 一种海洋可控源电磁数据海水扰动噪声校正方法 |
CN106200381B (zh) * | 2016-07-27 | 2019-09-20 | 华电水务科技股份有限公司 | 一种根据处理水量分阶段控制水厂运行的方法 |
CN117289276B (zh) * | 2023-11-24 | 2024-02-27 | 航天宏图信息技术股份有限公司 | Sar图像的处理方法、装置、电子设备和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1256490A (zh) * | 1998-10-27 | 2000-06-14 | 松下电器产业株式会社 | 波形整形设备和包括该设备的再现信号处理设备 |
CN2764072Y (zh) * | 2004-12-30 | 2006-03-08 | 西安交通大学 | 基于dsp的网络化设备智能监测装置 |
CN101442512A (zh) * | 2008-12-19 | 2009-05-27 | 西安电子科技大学 | Ofdm信号的识别方法 |
-
2009
- 2009-07-21 CN CN 200910088877 patent/CN101957458B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1256490A (zh) * | 1998-10-27 | 2000-06-14 | 松下电器产业株式会社 | 波形整形设备和包括该设备的再现信号处理设备 |
CN2764072Y (zh) * | 2004-12-30 | 2006-03-08 | 西安交通大学 | 基于dsp的网络化设备智能监测装置 |
CN101442512A (zh) * | 2008-12-19 | 2009-05-27 | 西安电子科技大学 | Ofdm信号的识别方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101957458A (zh) | 2011-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101957458B (zh) | 一种处理超低频数据的方法 | |
CN102636577B (zh) | 一种基于小波变换提取轮辋超声波探伤信号的方法 | |
CN102832908B (zh) | 基于小波变换与变步长lms自适应滤波的信号降噪方法 | |
CN103487835B (zh) | 一种基于模型约束的多分辨率波阻抗反演方法 | |
CN101586997A (zh) | 一种拉索振动基频的计算方法 | |
CN104897780B (zh) | 一种利用声发射信号能量对声发射源进行定位的方法 | |
CN106596724B (zh) | 一种窄带Lamb波检测数据稀疏压缩优化重建方法 | |
CN103398295B (zh) | 一种管道漏磁信号数据压缩装置及方法 | |
CN101701934A (zh) | Acfm缺陷智能可视化检测系统 | |
CN102508031A (zh) | 一种基于傅里叶级数的局部放电脉冲相角测量方法 | |
CN103163567B (zh) | 基于能量的气枪子波气泡比分析方法及装置 | |
CN102809687B (zh) | 一种交流电频率的数字化测量方法 | |
CN102176121A (zh) | 数字超声经颅多普勒数字解调和信号处理方法及装置 | |
CN109063762A (zh) | 一种基于dt-cwt和s4vm的管道堵塞故障识别方法 | |
CN100464185C (zh) | 混凝土超声层析成像算法 | |
CN204330664U (zh) | 管道内泥浆浓度电容式测量装置 | |
CN109187769A (zh) | 一种基于超声导波定量化检测管道缺陷的方法 | |
CN106769734B (zh) | 一种超声波聚焦式河流泥沙浓度在线测量方法 | |
CN114721037A (zh) | 一种智能声学技术对管道内特征的检测、定位与识别方法 | |
CN113189641B (zh) | 一种两道多模式瑞利波地下探测系统及方法 | |
CN102853902B (zh) | 一种非接触测量边界振动的方法及应用 | |
CN104422953B (zh) | 一种提高地震叠前时间偏移计算效率的方法 | |
CN117688369A (zh) | 基于das的注浆管道数据降噪方法 | |
CN103033154A (zh) | 一种用于提高超声检测时间分辨率的自回归谱分析方法 | |
CN102707288B (zh) | 超声波回波时间的检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |