CN114595192B - 一种适用于区域地质调查用智能数据实时汇聚方法及系统 - Google Patents

一种适用于区域地质调查用智能数据实时汇聚方法及系统 Download PDF

Info

Publication number
CN114595192B
CN114595192B CN202210231160.1A CN202210231160A CN114595192B CN 114595192 B CN114595192 B CN 114595192B CN 202210231160 A CN202210231160 A CN 202210231160A CN 114595192 B CN114595192 B CN 114595192B
Authority
CN
China
Prior art keywords
data
time
phase
monitoring
geological
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210231160.1A
Other languages
English (en)
Other versions
CN114595192A (zh
Inventor
李五福
刘建栋
王春涛
欧阳光文
李善平
陈丽娟
赵忠国
张新远
郝永强
王伟
卢世银
曹锦山
乔国栋
马致远
李红刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
QINGHAI GEOLOGICAL SURVEY INSTITUTE
Original Assignee
QINGHAI GEOLOGICAL SURVEY INSTITUTE
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by QINGHAI GEOLOGICAL SURVEY INSTITUTE filed Critical QINGHAI GEOLOGICAL SURVEY INSTITUTE
Priority to CN202210231160.1A priority Critical patent/CN114595192B/zh
Publication of CN114595192A publication Critical patent/CN114595192A/zh
Application granted granted Critical
Publication of CN114595192B publication Critical patent/CN114595192B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/1734Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Geophysics And Detection Of Objects (AREA)

Abstract

本发明公开了一种适用于区域地质调查用智能数据实时汇聚方法及系统,步骤S1、在目标区域设置数据采集点,并利用所述数据采集点采集目标区域每个时序上的地质数据,再以时序排列对地质数据采用时序变形监测算法转化降噪,获取多层单元数据;步骤S2、在所述多层单元数据中采用非局部窗口相干点提取高质量地质数据的相位信息及残差点;步骤S3、对所述相位信息及残差点采用相位解缠算法恢复干涉相位的整周模糊度,构建评估地质数据时效性的评估模型;步骤S4、依据所述评估模型建立分布式数据库管理模式,动态更新相应的配置文件及地质数据信息,实时监测形变数据可为应急监测提供有力的技术保障,并且能够全方面掌控突变区域数据信息的完整性。

Description

一种适用于区域地质调查用智能数据实时汇聚方法及系统
技术领域
本发明涉及地质勘测领域,具体涉及一种适用于区域地质调查用智能数据实时汇聚方法及系统。
背景技术
地质勘测领域一直非常重视各种信息技术的应用,逐步形成了地质信息化应用这一重要分支。目前在野外、室内均使用了大量的硬件、软件资源,如何将这些资源有机结合,实现野外调查、勘探等数据实时地与指挥和管理中心进行交互,对安全、有序、科学地开展地质调查工作将具有十分重要的意义。
现有技术CN201910976866.9公开了一种野外地质调查数据实时汇聚方法及系统,方法包括:获取待汇聚的项目文件,所述项目文件包括多个子项目文件;布设一个Hadoop集群;将各所述子项目文件中的野外地质调查数据分别对应上传至不同数据组织形式的目录,形成项目成果资料,所述目录包括多个子项目数据目录;记录各子项目文件中野外地质调查数据的资源描述信息,并存储至数据库中;将所述项目成果资料数据复制至二级项目;更新所述资源描述信息,所述资源描述信息包括资源类型、资源名称和资源大小;将各所述子项目文件中的野外地质调查数据内容抽取出来存储到所述Hadoop集群。本发明能够快速地汇聚数据,并且方便上级项目高效地管理汇聚数据。
虽然上述现有技术能够实现快速地汇聚数据,并且方便上级项目高效地管理汇聚数据,但仍然存在一定的不足,包括未对地质数据的时序信息进行实时的相位解缠和评估,对数据要求低,并不能实现地质数据在时序上的地形突变区域的全面掌控,导致实时勘测数据的可信度低。
发明内容
本发明的目的在于提供一种适用于区域地质调查用智能数据实时汇聚方法及系统,以解决现有技术中不能实现对地质数据在时序上的地形突变区域的全面掌控,导致实时勘测数据的可信度低的技术问题。
为解决上述技术问题,本发明具体提供下述技术方案:
一种适用于区域地质调查用智能数据实时汇聚方法,包括以下步骤:
步骤S1、在目标区域采用物理分布和逻辑分布相结合的数据采集模式设置数据采集点,并利用所述数据采集点采集目标区域每个时序上的地质数据,再以时序排列对每个时序上的地质数据采用时序变形监测算法转化降噪,获取多层单元数据;
步骤S2、在所述多层单元数据中采用非局部窗口相干点提取高质量地质数据的相位信息及残差点;
步骤S3、对所述相位信息及残差点采用相位解缠算法恢复干涉相位的整周模糊度,生成一幅连续的解缠相位图,将相邻采集时间的平均速率作为相位时序处理的优先选择,构建评估地质数据时效性的评估模型;
步骤S4、依据所述评估模型建立分布式数据库管理模式,采用Ibatis持久层框架在半结构文件XML中配置相应的类单元,动态更新相应的配置文件及地质数据信息。
作为本发明的一种优选方案,所述步骤S1中,相邻所述数据采集点设置时间基线阈值Δt,以所述时间基线阈值Δt组成的单元窗口大小W设置地质数据的时间基线T,根据地质数据的时序信息实时获取每个窗口数据影像的获取时间Tw以及时间序列的处理时间TS,第一个窗口数据影像的获取时间为Tw1=WΔt,依据所述窗口数据影像的获取时间Tw以及处理时间TS获取单独窗口数据影像的获取时间Tw=(W-2TS)Δt。
作为本发明的一种优选方案,所述单独窗口影像的获取时间Tw依据所述时序变形监测算法计算时序重叠窗口
Figure BDA0003540571870000021
所述时序变形监测算法的计算方法包括:
对所述时间基线阈值Δt在单元窗口内设定n个监测值Li,每个监测值Li在监测形变之前采用最小二乘平差计算其方差σ2 n,i
将所述n个监测值中任意剔除第i个监测值Li,利用剩余监测值数据再进行最小二乘平差并计算每次平差后的验后方差σ2 (n-1),i,得到n个验后方差的均值σ2 (n-1),1、σ2 (n-1),2...σ2 (n-1),n,取方差中最小值参与计算监测值数据形变位置Ej表示监测值Li位置:
Figure BDA0003540571870000031
其中Ej表示n×1维矢量且第j个元素设置为1,第j个元素为1表示n个监测值中异常数据的位置;
将所述形变位置Ej依据所述时间序列的处理时间TS设定重叠窗口Tsi
作为本发明的一种优选方案,所述步骤S2中,所述多层单元数据中包含形变位置Ej以及相邻单元窗口内采集时间相位变化增量的时间序列Ti,根据所述时间序列Ti、Ti+1分别获取发射天线到监测目标点的监测距离Ri、Ri+1,得到所述数据采集点的干涉相位
Figure BDA0003540571870000032
根据地质数据中的角度范围及多视后影像大小计算每个监测目标点的经纬度。
作为本发明的一种优选方案,所述步骤S3中,所述干涉相位Δφmin采用相位解缠算法矫正干涉相位,具体方法包括:
步骤S301、依据所述形变位置Ej确定结果形变位置,对形变区域干涉相位Δφmin进行分解,得到在t时刻大气延迟相位φatm(t),所述大气延迟相位φatm(t)的表达式为:
Figure BDA0003540571870000033
其中N(t)表示t时刻大气折射率与监测距离Ri相关;
步骤S302、所述干涉相位Δφmin在不同时间的大气折射系数不同,则t1和t2时刻相位差为:
Figure BDA0003540571870000034
作为本发明的一种优选方案,所述步骤S3中,所述干涉相位Δφmin以相邻采集时间相位变化增量的时间序列生成相位干涉图像,所述相位干涉图像在t1和t2时刻的每个像素均可表示为:
BL*NQN*1=δΔφL*NL*1
其中BL*N表示系数矩阵,QN*1表示t1和t2时刻的包含大气和形变的相位,δ表示相位系数,受形变影响,εL*1表示噪声相位,L表示矩阵行数,N表示矩阵列数,ΔφL*N表示具有L行N列的干涉相位。
作为本发明的一种优选方案,所述步骤S3中,所述评估模型的精度确定方法包括:
步骤S303、对所述不同时刻的像素BL*NQN*1利用正态最小二乘的方法计算每个像素相位改变增量
Figure BDA0003540571870000041
步骤S304、利用相位增量
Figure BDA0003540571870000042
计算相位残差:
VL*1=BL*NQN*1-δΔφL*N
得到相位的均方根残差表达式为:
Figure BDA0003540571870000043
其中,r表示冗余次数,m表示相干性高于阈值的干涉对数量;
步骤S305、对所述均方根残差σ0计算协方差矩阵:
Figure BDA0003540571870000044
其中B表示系数矩阵;
根据所述协方差矩阵引入预估量
Figure BDA0003540571870000045
预估每个像素的精度指标:
Figure BDA0003540571870000046
其中
Figure BDA0003540571870000051
表示ti至ti+1时刻的协方差矩阵,
Figure BDA0003540571870000052
表示ti至ti+1时刻的干涉相位。
作为本发明的一种优选方案,所述步骤S4中,将所述精度指标作为影响因子输入评估模型实时监测数据融合,所述数据融合方法包括:
根据所述n个监测值Li的方差σ1、σ2...σn构建分布函数F(x,σi),所述分布函数F(x,σi)表达式为:
Figure BDA0003540571870000053
p(σ)为σ的先验分布;
对所述分布函数F(x,σi)依据预估量
Figure BDA0003540571870000054
获取影响因子内任一决策函数d(X),所述决策函数d(X)的表达式为:
Figure BDA0003540571870000055
对所述决策函数d(X)内估算的监测值Li进行筛选获取融合后的地质数据,并依据先验分布p(σ)及预估量
Figure BDA0003540571870000056
评估数据融合汇聚概率。
作为本发明的一种优选方案,本发明提供了一种适用于区域地质调查用智能数据实时汇聚系统,包括:
数据采集装置,等间隔的设置在目标区域处,并用于采集目标区域处在每个时序上的地质数据;
监测存储单元,确定地质数据时序样本,对实时监测数据进行数据统计和数据分析,并利用所述时序样本提取相位及残差信息,生成连续的解缠相位图;
多源数据融合单元,确定数据融合汇聚概率,将地质数据时序信息采用相位解缠算法对监测值进行处理,构建评估模型;
实时数据监测单元,根据所述评估模型勘测地质数据,预测目标区域数据完整性。
作为本发明的一种优选方案,所述数据融合汇聚概率采用相邻数据时序的相位信息计算标准偏差后,再计算数据的融合评偏差得到。
本发明与现有技术相比较具有如下有益效果:
本发明利用地基雷达监测目标区域地质数据时序信息,在相邻时序间隔内采用非局部窗口相干点提取高质量地质数据相位信息及残差点,并依据时序信息采用相位解缠算法恢复干涉相位的整周模糊度,生成连续的解缠相位图,将相邻采集时间的平均速率作为相位时序处理的优先选择,并构建评估地质数据时效性的评估模型评价实时数据处理的精确性,实时监测形变数据避免了大气及其他因素导致的相位延迟效应,可为应急监测提供有力的技术保障,并且能够全方面掌控突变区域数据信息的完整性。
附图说明
为了更清楚地说明本发明的实施方式或现有技术中的技术方案,下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是示例性的,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图引伸获得其它的实施附图。
图1为本发明实施例提供的数据实时汇聚方法流程图;
图2为本发明实施例提供的数据实时汇聚系统结构框图。
图中的标号分别表示如下:
1-数据采集装置;2-监测存储单元;3-多源数据融合单元;4-实时数据监测单元。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1-2所示,在目标区域采用等间隔的采集模式采集数据,并将地质数据按照采集时序进行存储,本发明采用地基雷达设备对目标区域地质数据进行实时监测,数据采集流程为:由数据采集系统向地基雷达系统发送指令,控制地基雷达扫描的范围和角度,监测最长最短距离和方位角等参数,地基雷达系统将采集的数据发送到数据采集系统,由于采集数据类型为RAW数据,经聚焦成像转化为SLC数据,最后数据采集系统将SLC数据同步到数据处理系统。
本发明中需要对地基雷达采集到的数据时序进行处理,通过对两景SLC雷达影像进行干涉处理,将两景SLC影像共轭复数相乘,采用非局部窗口相干点提取高精度形变监测结果,为了获得高质量影像和减少干涉相位图中的残差点,需要对干涉相位进行滤波优化,提高干涉相位图的信噪比,保证相位解缠的质量,从而提高形变监测的精度与可行性,对滤波后的形变监测结果进行时序分析,在紧急的应急情况下,对监测区域实时监测并发布预警信息,并对形变位置进行标记,方便专业人士详细了解形变区域。
一种适用于区域地质调查用智能数据实时汇聚方法,包括以下步骤:
步骤S1、在目标区域采用物理分布和逻辑分布相结合的数据采集模式设置数据采集点,并利用所述数据采集点采集目标区域每个时序上的地质数据,再以时序排列对每个时序上的地质数据采用时序变形监测算法转化降噪,获取多层单元数据;
本实施例步骤S1中,时序排列间隔保持一致,当需获取连续时序间隔的地质数据时,通过计算所有连续时序间隔的全局最优解作为获取结果,其步骤如下:
本实施例可通过公共相干像素连接相邻时序数据组成合并单元数据,最终得到合并单元的最优解,本实施例以相邻两个单元为例,假设两个单元窗口基线大小为30,时间基线为2T,重叠窗口为4T,第1单元从第1幅影像到第30幅影像,第2单元从第27幅影像到第56幅影像,重叠窗口的影像从第27幅影像到30幅影像,由于每个独立单元中的相干像素可能不同,基于两个单元相干像素的交集寻找单元数据的最佳解。
步骤S2、在所述多层单元数据中采用非局部窗口相干点提取高质量地质数据的相位信息及残差点;
步骤S3、对所述相位信息及残差点采用相位解缠算法恢复干涉相位的整周模糊度,生成一幅连续的解缠相位图,将相邻采集时间的平均速率作为相位时序处理的优先选择,构建评估地质数据时效性的评估模型;
步骤S4、依据所述评估模型建立分布式数据库管理模式,采用Ibatis持久层框架在半结构文件XML中配置相应的类单元,动态更新相应的配置文件及地质数据信息。
本实施例采用Ibatis持久层框架构建基于数据库连接池的类单元,以重复使用相关连接对象,而不需要每次都经历一次重新的创建过程,在没有使用的情况下又可以自动释放,同时通过设定数据库连接池能够允许同时连接的最大数量来实现动态管理系统用户的与数据库连接操作,也可以实现对数据的性能和连接数量的精确掌握从而保证系统更加稳定的运行。
本实施例中,基于数据库连接池的类单元需要根据一定规则综合设置最大和最小连接数:
第一:需保证数据库连接池的最小连接数一直处于在使用的状态中,以避免资源的浪费;第二:确保数据库连接池的最大连接数足以满足高并发时候的使用场景,避免因为连接数量不足造成的排队等待,进而影响到数据的实时处理效率。
所述步骤S1中,相邻所述数据采集点设置时间基线阈值Δt,以所述时间基线阈值Δt组成的单元窗口大小W设置地质数据的时间基线T,根据地质数据的时序信息实时获取每个窗口数据影像获取时间Tw以及时间序列的处理时间TS,第一个窗口数据影像的获取时间为Tw1=WΔt,依据所述窗口数据影像获取时间Tw以及处理时间TS获取单独窗口数据影像的获取时间Tw=(W-2TS)Δt。
本实施例中,所述单元窗口大小W和时间基线T是每个窗口数据影像获取时间Tw的两个重要参数,在获取每个窗口数据影像时间时需将重叠窗口设置为时间基线T的两倍,获取等待时间取决于每个单元窗口大小W和重叠大小之差为W-2T。
所述单独窗口影像的获取时间Tw依据所述时序变形监测算法计算时序重叠窗口Tsi,所述时序变形监测算法的计算方法包括:
对所述时间基线阈值Δt在单元窗口内设定n个监测值Li,每个监测值Li在监测形变之前采用最小二乘平差计算其方差σ2 n,i
将所述n个监测值中任意剔除第i个监测值Li,利用剩余监测值数据再进行最小二乘平差并计算每次平差后的验后方差σ2 (n-1),i,得到n个验后方差的均值σ2 (n-1),1、σ2 (n-1),2...σ2 (n-1),n,取方差中最小值参与计算监测值数据形变位置Ej表示监测值Li位置:
Figure BDA0003540571870000091
其中Ej表示n×1维矢量且第j个元素设置为1,第j个元素为1表示n个监测值中异常数据的位置;
本实施例中,在对监测值经过N轮完整搜索后,假设σ2 (n1(m-1)),i是n-m+1维完整搜索获得的最小验后方差,当执行完n-m维完整搜索后,假设正好将全部的异常值搜索完成,此时σ2 (n-m),k与σ2 (n-(m-1)),i相比会有显著的差异时,认为搜索结束,因此,用两个相邻完整搜索的最小方差比来判断下一个完整搜索是否继续进行。
最小方差比定义为:
Figure BDA0003540571870000092
本实施例中,对监测点的数据分组监测,按照监测点构成监测线分两组进行监测,每次监测设置固定的测回数,当完成一个周期的监测后需要立即进行测站平差,然后才能够提供测站点到各监测点精密的距离和方向值,各个监测点的坐标是由测站平差后得到距离、方位角和天顶距解算得到,原观测数据是倾斜距离、方向值和垂直角,如果在观测过程中,某个测回的监测值带有异常值,将导致坐标或高差值异常,为了从源头上探测异常监测值,在一个周期观测完成后,将采用时序变形监测算法针对原监测数据进行异常值的定位和修正,使其监测数据的可靠性得以保障。
将所述形变位置Ej依据所述时间序列的处理时间TS设定重叠窗口
Figure BDA0003540571870000101
所述步骤S2中,所述多层单元数据中包含形变位置Ej以及相邻单元窗口内采集时间相位变化增量的时间序列Ti、Ti+1分别,根据所述时间序列Ti获取发射天线到监测目标点的监测距离Ri、Ri+1,得到所述数据采集点的干涉相位
Figure BDA0003540571870000102
根据地质数据中的角度范围及多视后影像大小计算每个监测目标点的经纬度。
所述步骤S3中,所述干涉相位Δφmin采用相位解缠算法矫正干涉相位,具体方法包括:
步骤S301、依据所述形变位置Ej确定结果形变位置,对形变区域干涉相位Δφmin进行分解,得到在t时刻大气延迟相位φatm(t),所述大气延迟相位φatm(t)的表达式为:
Figure BDA0003540571870000103
其中N(t)表示t时刻大气折射率与监测距离Ri相关;
步骤S302、所述干涉相位Δφmin在不同时间的大气折射系数不同,则t1和t2时刻相位差为:
Figure BDA0003540571870000104
Figure BDA0003540571870000117
所述步骤S3中,所述干涉相位Δφmin以相邻采集时间相位变化增量的时间序列生成相位干涉图像,所述相位干涉图像在t1和t2时刻的每个像素均可表示为:
BL*NQN*1=δΔφL*NL*1
其中BL*N表示系数矩阵,QN*1表示t1和t2时刻的包含大气和形变的相位,δ表示相位系数,受形变影响,εL*1表示噪声相位,L表示矩阵行数,N表示矩阵列数,ΔφL*N表示具有L行N列的干涉相位。
所述步骤S3中,所述评估模型的精度确定方法包括:
步骤S303、对所述不同时刻的像素BL*NQN*1利用正态最小二乘的方法计算每个像素相位改变增量
Figure BDA0003540571870000111
步骤S304、利用相位增量
Figure BDA0003540571870000112
计算相位残差:
VL*1=BL*NQN*1-δΔφL*N
得到相位的均方根残差表达式为:
Figure BDA0003540571870000113
其中,r表示冗余次数,m表示相干性高于阈值的干涉对数量;
步骤S305、对所述均方根残差σ0计算协方差矩阵:
Figure BDA0003540571870000114
其中B表示系数矩阵。
根据所述协方差矩阵引入预估量
Figure BDA0003540571870000115
预估每个像素的精度指标:
Figure BDA0003540571870000116
其中
Figure BDA0003540571870000121
表示ti至ti+1时刻的协方差矩阵,
Figure BDA0003540571870000122
表示ti至ti+1时刻的干涉相位。
所述步骤S4中,将所述精度指标作为影响因子输入评估模型实时监测数据融合,所述数据融合方法包括:
根据所述n个监测值Li的方差σ1、σ2...σn构建分布函数F(x,σi),所述分布函数F(x,σi)表达式为:
Figure BDA0003540571870000123
p(σ)为σ的先验分布;
对所述分布函数F(x,σi)依据预估量
Figure BDA0003540571870000124
获取影响因子内任一决策函数d(X),所述决策函数d(X)的表达式为:
Figure BDA0003540571870000125
对所述决策函数d(X)内估算的监测值Li进行筛选获取融合后的地质数据,并依据先验分布p(σ)及预估量
Figure BDA0003540571870000126
评估数据融合汇聚概率。
本实施例中,所述分布函数F(x,σi)将每一个目标数据各自的关联概率分布综合成一个联合后验分布函数,然后随监测值的到来,不断更新假设的该联合分布的似然函数,并通过该似然函数的极大或极小值进行信息的最后融合,可以有效地对多源不确定性、不一致性数据进行融合,从实质上识别相关监测数据的不一致,从而反映所测数据的真实状态。
如图2所示,基于上述用于区域地质调查用智能数据实时汇聚方法,本发明提供了一种适用于区域地质调查用智能数据实时汇聚系统,包括:
数据采集装置1,等间隔的设置在目标区域处,并用于采集目标区域处在每个时序上的地质数据;
监测存储单元2,确定地质数据时序样本,对实时监测数据进行数据统计和数据分析,并利用所述时序样本提取相位及残差信息,生成连续的解缠相位图;
多源数据融合单元3,确定数据融合汇聚概率,将地质数据时序信息采用相位解缠算法对监测值进行处理,构建评估模型;
实时数据监测单元4,根据所述评估模型勘测地质数据,预测目标区域数据完整性。
本实施例中,采用分布化的存储方式存储每个时序上的地质数据,对数据进行解析,并对数据进行定向转换和数据融合处理,针对数据发生异常的情况下的诊断和预警功能,同时完成对监测数据的管理和分类,并将数据适时地推送给管理中心。
所述数据融合汇聚概率采用相邻数据时序的相位信息计算标准偏差后,再计算数据的融合评偏差得到。
本发明利用地基雷达监测目标区域地质数据时序信息,在相邻时序间隔内采用非局部窗口相干点提取高质量地质数据相位信息及残差点,并依据时序信息采用相位解缠算法恢复干涉相位的整周模糊度,生成连续的解缠相位图,将相邻采集时间的平均速率作为相位时序处理的优先选择,并构建评估地质数据时效性的评估模型评价实时数据处理的精确性,实时监测形变数据避免了大气及其他因素导致的相位延迟效应,可为应急监测提供有力的技术保障,并且能够全方面掌控突变区域数据信息的完整性。
以上实施例仅为本申请的示例性实施例,不用于限制本申请,本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内,对本申请做出各种修改或等同替换,这种修改或等同替换也应视为落在本申请的保护范围内。

Claims (10)

1.一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于,包括以下步骤:
步骤S1、在目标区域采用物理分布和逻辑分布相结合的数据采集模式设置数据采集点,并利用所述数据采集点采集目标区域每个时序上的地质数据,再以时序排列对每个时序上的地质数据采用时序变形监测算法转化降噪,获取多层单元数据;
步骤S2、在所述多层单元数据中采用非局部窗口相干点提取高质量地质数据的相位信息及残差点;
步骤S3、对所述相位信息及残差点采用相位解缠算法恢复干涉相位的整周模糊度,生成一幅连续的解缠相位图,将相邻采集时间的平均速率作为相位时序处理的选择,构建评估地质数据时效性的评估模型;
步骤S4、依据所述评估模型建立分布式数据库管理模式,采用Ibatis持久层框架在半结构文件XML中配置相应的类单元,动态更新相应的配置文件及地质数据信息。
2.根据权利要求1所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于:所述步骤S1中,相邻所述数据采集点设置时间基线阈值Δt,以所述时间基线阈值Δt组成的单元窗口大小W设置地质数据的时间基线T,根据地质数据的时序信息实时获取每个窗口数据影像的获取时间Tw以及时间序列的处理时间TS,第一个窗口数据影像的获取时间为Tw1=WΔt,依据所述窗口数据影像的获取时间Tw以及处理时间TS获取单独窗口数据影像的获取时间Tw=(W-2TS)Δt。
3.根据权利要求2所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于:所述单独窗口数据影像的获取时间Tw依据所述时序变形监测算法计算时序重叠窗口
Figure FDA0004035531930000011
所述时序变形监测算法的计算方法包括:
对所述时间基线阈值Δt在单元窗口内设定n个监测值Li,每个监测值Li在监测形变之前采用最小二乘平差计算其方差σ2 n,i
将所述n个监测值中任意剔除第i个监测值Li,利用剩余监测值再进行最小二乘平差并计算每次平差后的验后方差σ2 (n-1),i,得到n个验后方差的均值σ2 (n-1),1、σ2 (n-1),2...σ2 (n-1),n,取方差中最小值参与计算监测值形变位置Ej以表示监测值Li位置:
Figure FDA0004035531930000021
其中Ej表示n×1维矢量且第j个元素为1,第j个元素为1表示n个监测值中异常数据的位置;
将所述形变位置Ej依据所述时间序列的处理时间TS设定重叠窗口
Figure FDA0004035531930000024
4.根据权利要求3所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于:所述步骤S2中,所述多层单元数据中包含形变位置Ej以及相邻单元窗口内采集时间相位变化增量的时间序列Ti,根据所述时间序列Ti、Ti+1分别获取发射天线到监测目标点的监测距离Ri、Ri+1,得到所述数据采集点的干涉相位
Figure FDA0004035531930000022
根据地质数据中的角度范围及多视后影像大小计算每个监测目标点的经纬度。
5.根据权利要求4所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于:所述步骤S3中,所述干涉相位Δφmin采用相位解缠算法矫正干涉相位,具体方法包括:
步骤S301、依据所述形变位置Ej确定结果形变位置,对形变区域干涉相位Δφmin进行分解,得到在t时刻大气延迟相位φatm(t),所述大气延迟相位φatm(t)的表达式为:
Figure FDA0004035531930000023
其中N(t)表示t时刻大气折射率与监测距离Ri相关;
步骤S302、所述干涉相位Δφmin在不同时间的大气折射系数不同,则t1和t2时刻相位差为:
Figure FDA0004035531930000031
6.根据权利要求5所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于:所述步骤S3中,所述干涉相位Δφmin以相邻采集时间相位变化增量的时间序列生成相位干涉图像,所述相位干涉图像在t1和t2时刻的每个像素均可表示为:
BL*NQN*1=δΔφL*NL*1
其中BL*N表示系数矩阵,QN*1表示t1和t2时刻的包含大气和形变的相位,δ表示相位系数,受形变影响,εL*1表示噪声相位,L表示矩阵行数,N表示矩阵列数,ΔφL*N表示具有L行N列的干涉相位。
7.根据权利要求6所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于,所述步骤S3中,所述评估模型的精度确定方法包括:
步骤S303、对不同时刻的像素BL*NQN*1利用正态最小二乘的方法计算每个像素相位改变增量
Figure FDA0004035531930000032
步骤S304、利用相位增量
Figure FDA0004035531930000033
计算相位残差:
VL*1=BL*NQN*1-δΔφL*N
得到相位的均方根残差表达式为:
Figure FDA0004035531930000034
其中,r表示冗余次数,m表示相干性高于阈值的干涉对数量;
步骤S305、对所述均方根残差σ0计算协方差矩阵:
Figure FDA0004035531930000041
其中B表示系数矩阵;
根据所述协方差矩阵引入预估量
Figure FDA0004035531930000042
预估每个像素的精度指标:
Figure FDA0004035531930000043
其中
Figure FDA0004035531930000044
表示ti至ti+1时刻的协方差矩阵,
Figure FDA0004035531930000045
表示ti至ti+1时刻的干涉相位。
8.根据权利要求7所述的一种适用于区域地质调查用智能数据实时汇聚方法,其特征在于,所述步骤S4中,将所述精度指标作为影响因子输入评估模型实时监测数据融合,所述数据融合方法包括:
根据所述n个监测值Li的方差σ1、σ2...σn构建分布函数F(x,σi),所述分布函数F(x,σi)表达式为:
Figure FDA0004035531930000046
p(σ)为σ的先验分布;
对所述分布函数F(x,σi)依据预估量
Figure FDA0004035531930000047
获取影响因子内任一决策函数d(X),所述决策函数d(X)的表达式为:
Figure FDA0004035531930000048
对所述决策函数d(X)内估算的监测值Li进行筛选获取融合后的地质数据,并依据先验分布p(σ)及预估量
Figure FDA0004035531930000049
评估数据融合汇聚概率。
9.一种使用权利要求1-8任一项所述方法的适用于区域地质调查用智能数据实时汇聚系统,其特征在于,包括:
数据采集装置(1),等间隔的设置在目标区域处,并用于采集目标区域处在每个时序上的地质数据;
监测存储单元(2),确定地质数据时序样本,对实时监测数据进行数据统计和数据分析,并利用所述时序样本提取相位及残差信息,生成连续的解缠相位图;
多源数据融合单元(3),确定数据融合汇聚概率,将地质数据时序信息采用相位解缠算法对监测值进行处理,构建评估模型;
实时数据监测单元(4),根据所述评估模型勘测地质数据,预测目标区域数据完整性。
10.根据权利要求9所述的一种适用于区域地质调查用智能数据实时汇聚系统,其特征在于,所述数据融合汇聚概率采用相邻数据时序的相位信息计算标准偏差后,再计算数据的融合评偏差得到。
CN202210231160.1A 2022-03-10 2022-03-10 一种适用于区域地质调查用智能数据实时汇聚方法及系统 Active CN114595192B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210231160.1A CN114595192B (zh) 2022-03-10 2022-03-10 一种适用于区域地质调查用智能数据实时汇聚方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210231160.1A CN114595192B (zh) 2022-03-10 2022-03-10 一种适用于区域地质调查用智能数据实时汇聚方法及系统

Publications (2)

Publication Number Publication Date
CN114595192A CN114595192A (zh) 2022-06-07
CN114595192B true CN114595192B (zh) 2023-02-28

Family

ID=81817670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210231160.1A Active CN114595192B (zh) 2022-03-10 2022-03-10 一种适用于区域地质调查用智能数据实时汇聚方法及系统

Country Status (1)

Country Link
CN (1) CN114595192B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116184873A (zh) * 2022-11-21 2023-05-30 广西师范大学 一种物联网环境大数据监控系统
CN115758776B (zh) * 2022-11-28 2024-06-04 核工业金华勘测设计院有限公司 一种多点地质统计学建模方法以及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0977054A2 (en) * 1998-07-08 2000-02-02 Lockheed Martin Corporation Determining height information
CN104062660A (zh) * 2014-07-14 2014-09-24 中南大学 一种基于时域离散InSAR干涉对的矿区地表时序形变监测方法
CN108802727A (zh) * 2018-04-13 2018-11-13 长沙理工大学 一种顾及流变参数的时序InSAR公路形变监测模型及解算方法
CN110109106A (zh) * 2019-04-23 2019-08-09 中国电力科学研究院有限公司 一种InSAR地形复杂区域干涉相位解缠方法
CN112698328A (zh) * 2020-11-30 2021-04-23 四川大学 一种用于大坝及滑坡变形gb-sar监测的相位解缠方法及系统
CN112986993A (zh) * 2021-02-07 2021-06-18 同济大学 一种基于空间约束的InSAR形变监测方法
CN113567979A (zh) * 2021-06-03 2021-10-29 长安大学 基于模拟退火算法的多时相InSAR相位解缠绕方法
CN113744395A (zh) * 2021-11-08 2021-12-03 辽博信息科技(山东)有限公司 一种建筑地基沉降的监测预警方法及系统
CN113836254A (zh) * 2021-09-29 2021-12-24 青海省地质调查院(青海省地质矿产研究院、青海省地质遥感中心) 一种自然资源综合调查信息提取方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0977054A2 (en) * 1998-07-08 2000-02-02 Lockheed Martin Corporation Determining height information
CN104062660A (zh) * 2014-07-14 2014-09-24 中南大学 一种基于时域离散InSAR干涉对的矿区地表时序形变监测方法
CN108802727A (zh) * 2018-04-13 2018-11-13 长沙理工大学 一种顾及流变参数的时序InSAR公路形变监测模型及解算方法
CN110109106A (zh) * 2019-04-23 2019-08-09 中国电力科学研究院有限公司 一种InSAR地形复杂区域干涉相位解缠方法
CN112698328A (zh) * 2020-11-30 2021-04-23 四川大学 一种用于大坝及滑坡变形gb-sar监测的相位解缠方法及系统
CN112986993A (zh) * 2021-02-07 2021-06-18 同济大学 一种基于空间约束的InSAR形变监测方法
CN113567979A (zh) * 2021-06-03 2021-10-29 长安大学 基于模拟退火算法的多时相InSAR相位解缠绕方法
CN113836254A (zh) * 2021-09-29 2021-12-24 青海省地质调查院(青海省地质矿产研究院、青海省地质遥感中心) 一种自然资源综合调查信息提取方法
CN113744395A (zh) * 2021-11-08 2021-12-03 辽博信息科技(山东)有限公司 一种建筑地基沉降的监测预警方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"Three-Dimensional Phase Unwrapping for Satellite Radar Interferometry, I: DEM Generation";Batuhan Osmanoğlu et al.;《IEEE Transactions on Geoscience and Remote Sensing》;20130430;全文 *
"基于中性残差点集的干涉SAR相位解缠算法";刘伟 等;《万方数据知识服务平台》;20090630;全文 *

Also Published As

Publication number Publication date
CN114595192A (zh) 2022-06-07

Similar Documents

Publication Publication Date Title
CN114595192B (zh) 一种适用于区域地质调查用智能数据实时汇聚方法及系统
Dinda et al. An integrated simulation approach to the assessment of urban growth pattern and loss in urban green space in Kolkata, India: A GIS-based analysis
US10275683B2 (en) Clustering-based person re-identification
CN108010320A (zh) 一种基于自适应时空约束低秩算法的路网交通数据的补全方法
US20240087226A1 (en) Method in constructing a model of a scenery and device therefor
WO2018207173A1 (en) System and method for construction 3d modeling and analysis
CN111033318A (zh) 当地气象预测
CN116539004A (zh) 一种采用无人机测绘的通信线路工程勘察设计方法与系统
CN110147837B (zh) 基于特征聚焦的任意方向密集目标检测方法、系统及设备
WO2014138622A1 (en) Performance prediction for generation of point clouds from passive imagery
CN112559534A (zh) 一种遥感影像数据归档管理系统及方法
CN111091101A (zh) 基于一步法的高精度行人检测方法、系统、装置
CN111985325A (zh) 特高压环境评价中的航拍小目标快速识别方法
KR20150131801A (ko) 지리정보시스템 및 뉴로퍼지 기법에 기반한 산사태 예측 시스템 및 이를 이용한 산사태 예측 방법
CN115239765A (zh) 基于多尺度可形变注意力的红外图像目标跟踪系统及方法
Park et al. A framework for improving object recognition of structural components in construction site photos using deep learning approaches
CN115147720A (zh) 基于坐标注意力和长短距上下文的sar舰船检测方法
Ceccarelli et al. Semantic segmentation through Artificial Intelligence from raw point clouds to H-BIM representation
Pagani et al. Deep neural network approach for automatic fog detection using traffic camera images
CN118674886B (zh) 一种智能化地理测绘数据处理方法及系统
Carrilho et al. Quality assessment for automatic LiDAR data classification methods
Nazarkevych et al. Method of Dataset Filling and Recognition of Moving Objects in Video Sequences based on YOLO.
CN117725662B (zh) 一种基于市政工程的工程施工仿真方法及系统
CN112954269B (zh) 一种用于大规模视觉计算系统的节点协同选择方法
Mahajan et al. An automated framework for deriving intersection coordination plans

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant