CN112989563A - 一种大坝安全监测数据分析方法 - Google Patents
一种大坝安全监测数据分析方法 Download PDFInfo
- Publication number
- CN112989563A CN112989563A CN202110144092.0A CN202110144092A CN112989563A CN 112989563 A CN112989563 A CN 112989563A CN 202110144092 A CN202110144092 A CN 202110144092A CN 112989563 A CN112989563 A CN 112989563A
- Authority
- CN
- China
- Prior art keywords
- regression
- dam
- data
- monitoring data
- analysis method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/10—Geometric CAD
- G06F30/13—Architectural design, e.g. computer-aided architectural design [CAAD] related to design of buildings, bridges, landscapes, production plants or roads
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Geometry (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Architecture (AREA)
- Civil Engineering (AREA)
- Structural Engineering (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种大坝安全监测数据分析方法,基于较为成熟的技术对大坝监测数据进行整理、统计分析、展示和预测。对数据进行初步的清洗、校验、整理,统计数据的基本属性和分布状况;根据监测仪器的空间分布和物理上的关联,采用常规算法对数据进行相关性分析和编组分析;采用适宜的组织方式,向用户展示数据的时域和空间分布特性,便于用户直观的认识数据内涵;采用较为成熟的统计回归方法,对大坝监测数据进行回归分析,建立基于统计回归的预测模型。通过本发明,能够降低数据拟合的难度,提高了大坝安全分析的精准性和时效性,为大坝安全的评价和预测提供了手段。
Description
技术领域
本发明涉及安全监控技术领域,尤其涉及一种大坝安全监测数据分析方法。
背景技术
大坝安全监测数据是大坝运行状态的整体表现,在受相同或相似外界因素影响下,其各区域之间数据必定存在相关性,这种相关性主要表现在时间序列趋势变化相似或空间趋势变化相似上。合理分析监测数据相似性,通过相似性分析不仅可以挖掘出哪些监测变量之间具有相关性,同时能量化安全监测数据之间相关性大小。经相似性分析处理后的监测数据,能准确反映大坝在时间与空间维度上的变化趋势,结合变化趋势规律能有效降低后续监测数据挖掘难度。
发明内容
为解决现有技术的不足,本发明提出了一种大坝安全监测数据分析方法。
为了实现上述目的,本发明提供一种大坝安全监测数据分析方法,包括:
采集大坝监测数据,并对大坝监测数据进行预处理;
将预处理后的安全监测数据按照工程需求划分为不同数据分项,对预处理后的大坝监测数据进行探测性分析,采用汇总统计的形式分析数据的基本属性和分布情况;
基于物理背景,确定影响观测量的影响因素,构建统计模型,应用多元回归分析方法推求统计模型中的最佳回归系数,以获取拟合程度最优的统计模型;
按照统计模型,将观测到的大坝建筑物安全性态分解成若干与环境变量的相关项,每个相关项均为环境变量的函数。
其中,对大坝监测数据进行预处理的步骤包括:对数据进行清洗、校验,删除数据中的重复信息,纠正存在的错误,保证数据的一致性,去除空白数据域和知识背景下的白噪声。
其中,基于理论推导,构建如下形式的土石坝运行期沉降的统计模型:
其中:δv表示坝体某点的沉降;θ表示从竣工到观测时刻的时间;Hi表示观测时刻的库水位;表示观测时刻前i天(小时)的平均水位,m根据经验和试算确定;b0、c1、c2、a11~a13及a21~a2m均为回归系数。
其中,多元线性回归的基本方法为最小二乘法;为提高回归分析的精度,根据统计模型因子的特点,多元线性回归采用加权回归或差值回归;为克服回归计算过程中出现的系数矩阵蜕化、系数矩阵病态,多元线性回归采用逐步回归分析法、正交法、镜像映射法处理。
其中,还包括对统计模型的回归系数,构建回归方程进行精度评价的步骤,包括:
根据观测资料:x1t,x2t,…,xkt,yt;t=1,2,…,n;n>k,推求得到如下的回归方程:
其中,b0、b1、b2、…、bn为回归系数;
复相关系数R按照下式计算:
剩余标准差S按照下式计算:
其中,回归方程预测的效果,通过显著性检验来评价;
检验整个回归方程的显著性,是通过评价所有自变量与因变量的线性关系是否密切得到;
采用F检验,F统计量的计算公式为:
根据给定的显著水平a、自由度(k,n-k-1)查F分布表,得到相应的临界值Fa,若F>Fa,则回归方程具有显著意义,回归效果显著;若F<Fa,则回归方程无显著意义,回归效果不显著。
区别于现有技术,本发明提供了一种大坝安全监测数据分析方法,基于较为成熟的技术对大坝监测数据进行整理、统计分析、展示和预测。对数据进行初步的清洗、校验、整理,统计数据的基本属性和分布状况;根据监测仪器的空间分布和物理上的关联,采用常规算法对数据进行相关性分析和编组分析;采用适宜的组织方式,向用户展示数据的时域和空间分布特性,便于用户直观的认识数据内涵;采用较为成熟的统计回归方法,对大坝监测数据进行回归分析,建立基于统计回归的预测模型。通过本发明,能够降低数据拟合的难度,提高了大坝安全分析的精准性和时效性,为大坝安全的评价和预测提供了手段。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1为本发明提供的一种大坝安全监测数据分析方法的流程示意图;
图2为本发明提供的一种大坝安全监测数据分析方法具体实施过程中涉及土石坝沉降变形的回归分析成果示意图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解,现对照附图详细说明本发明的具体实施方式。
参阅图1,本发明提供了一种大坝安全监测数据分析方法,包括:
采集大坝监测数据,并对大坝监测数据进行预处理;
将预处理后的安全监测数据按照工程需求划分为不同数据分项,对预处理后的大坝监测数据进行探测性分析,采用汇总统计的形式分析数据的基本属性和分布情况;
基于物理背景,确定影响观测量的影响因素,构建统计模型,应用多元回归分析方法推求统计模型中的最佳回归系数,以获取拟合程度最优的统计模型;
按照统计模型,将观测到的大坝建筑物安全性态分解成若干与环境变量的相关项,每个相关项均为环境变量的函数。
针对大坝安全监测数据(如大坝形变、渗压力等),开展分析前的预处理工作,对大坝监测数据进行预处理的步骤包括:对数据进行清洗、校验,删除数据中的重复信息,纠正存在的错误,保证数据的一致性,去除空白数据域和知识背景下的白噪声。
依据工程需求,将预处理后的安全监测数据划分为不同数据分项,并对每个大类中的数据,按照监测数据的种类,划分监测数据分项,并对每个分项中的数据按时间序列由远到近的形式进行初步整理。
对数据进行探测性数据分析(Exploratory Data Analysis,EDA),采用汇总统计的形式分析数据的基本属性和分布情况。对于单一的监测数据分项,计算其频率、众数、百分位数,以及位置度量(均值、中位数)和散度分布(极差、方差)用于分析数据的基本属性。
此外,对关键数据进行趋势分析和突变分析。对于关键数据或记录时间较长的监测数据,针对其沿时间轴的变化情况,解析数据的变化情势和趋势,解析影响数据突变的相关因素。
基于一定的物理背景,确定影响观测量(如大坝变形、坝体渗流量、坝内渗压、地下洞室周壁变形等)的影响因素,构建统计模型。
例如土石坝运行期的沉降主要包括库水压力引起的沉降、固结沉降、流变沉降、湿化沉降、渗流引起的沉降,基于理论推导,构建如下形式的土石坝运行期沉降的统计模型:
其中:δv表示坝体某点的沉降;θ表示从竣工到观测时刻的时间;Hi表示观测时刻的库水位;表示观测时刻前i天(小时)的平均水位,m根据经验和试算确定;b0、c1、c2、a11~a13及a21~a2m均为回归系数。
多元回归分析的目标是推求统计模型中的最佳回归系数,例如统计模型中的b0、c1、c2、a11~a13及a21~a2m,以获取拟合程度最优的统计模型。
多元线性回归的基本方法为最小二乘法;为提高回归分析的精度,根据统计模型因子的特点,多元线性回归采用加权回归或差值回归;为克服回归计算过程中出现的系数矩阵蜕化、系数矩阵病态,多元线性回归采用逐步回归分析法、正交法、镜像映射法处理。
通过回归分析,可以按照统计模型,将观测到的某种大坝建筑物安全性态(如变形、应力、渗压等)分解成若干与环境变量的相关项,如大坝位移可以分解为水位分量、温度分量、时间分量等,每个相关项均为环境变量的函数。例如:图2给出的某土石坝沉降变形的回归分析成果。
回归方程实质上是环境量到大坝建筑物安全性态的映射模型,有了这样的映射模型,根据实测或预报的环境量,即可预测大坝建筑物安全性态。
回归方程的精度可以通过一些定量指标来评价,其中主要的指标有复相关系数R和剩余标准差S。复相关系数越大,剩余标准差越小,表示回归的效果越好。构建回归方程进行精度评价的步骤,包括:
根据观测资料:x1t,x2t,…,xkt,yt;t=1,2,…,n;n>k,推求得到如下的回归方程:
其中,b0、b1、b2、…、bn为回归系数;
复相关系数R按照下式计算:
剩余标准差S按照下式计算:
其中,回归方程预测的效果,通过显著性检验来评价;
检验整个回归方程的显著性,是通过评价所有自变量与因变量的线性关系是否密切得到;
采用F检验,F统计量的计算公式为:
根据给定的显著水平a、自由度(k,n-k-1)查F分布表,得到相应的临界值Fa,若F>Fa,则回归方程具有显著意义,回归效果显著;若F<Fa,则回归方程无显著意义,回归效果不显著。
通过本发明的方法构建的大坝坝体监测系统,通过互联网与中心服务器建立网络连接,实时将数据上传至中心服务器。中心服务器上部署在线监测服务系统,与监测仪器建立TCP通信服务,设备将原始数据发送至监测服务系统,监测服务系统对原始数据进行解析处理并将结果存储至数据库;中心服务器上部署在线监测WEB系统,WEB系统配置数据库建立连接,用户可通过PC浏览器、手机APP进行交互操作。
该大坝坝体监测系统基于.NET CORE技术框架,基于B/S结构设计,同时平台采用模块化开放式的体系技术,分布式结构化设计,灵活可拆分,易于二次开发和扩充,最大限度降低技术升级带来的系统实施风险;系统使用成熟的RBAC权限管理技术,对用户操作权限进行统一管理;采用WebGL轻量化三维技术,无需插件,在服务端存放三维场景所需要的三维数据,客户网页端显示采用高效的空间索引技术,渐进传输技术和地形简化算法;系统利用先进的物联网络通信技术做到数据业务实时响应和决策分析,考虑系统的各业务系统的安全性,并实现系统实时运行状态监控,进行交互展示及信息推送。
系统采用三层架构,由显示层、业务层、数据层组成,系统运行在基础设施服务上,基础服务包括云服务器、4G传输网络、数据库。
显示层:实现GIS展示、渗压分析、库水位监测、规范制度、人工监测等交互操作;
业务层:实现交互层所需业务数据的处理,为工程监测应用提供支持,如安全服务、接口服务、数据分析、数据处理、日志消息、状态信息等;
数据层:实现对原始数据的存储,对数据库的读写操作、数据缓存处理、文件存储等功能,为业务层或其他应用提供底层数据。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。
Claims (6)
1.一种大坝安全监测数据分析方法,其特征在于,包括:
采集大坝监测数据,并对大坝监测数据进行预处理;
将预处理后的安全监测数据按照工程需求划分为不同数据分项,对预处理后的大坝监测数据进行探测性分析,采用汇总统计的形式分析数据的基本属性和分布情况;
基于物理背景,确定影响观测量的影响因素,构建统计模型,应用多元回归分析方法推求统计模型中的最佳回归系数,以获取拟合程度最优的统计模型;
按照统计模型,将观测到的大坝建筑物安全性态分解成若干与环境变量的相关项,每个相关项均为环境变量的函数。
2.根据权利要求1所述的大坝安全监测数据分析方法,其特征在于,对大坝监测数据进行预处理的步骤包括:对数据进行清洗、校验,删除数据中的重复信息,纠正存在的错误,保证数据的一致性,去除空白数据域和知识背景下的白噪声。
4.根据权利要求1所述的大坝安全监测数据分析方法,其特征在于,多元线性回归的基本方法为最小二乘法;为提高回归分析的精度,根据统计模型因子的特点,多元线性回归采用加权回归或差值回归;为克服回归计算过程中出现的系数矩阵蜕化、系数矩阵病态,多元线性回归采用逐步回归分析法、正交法、镜像映射法处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110144092.0A CN112989563A (zh) | 2021-02-02 | 2021-02-02 | 一种大坝安全监测数据分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110144092.0A CN112989563A (zh) | 2021-02-02 | 2021-02-02 | 一种大坝安全监测数据分析方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112989563A true CN112989563A (zh) | 2021-06-18 |
Family
ID=76346217
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110144092.0A Pending CN112989563A (zh) | 2021-02-02 | 2021-02-02 | 一种大坝安全监测数据分析方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112989563A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113762399A (zh) * | 2021-09-10 | 2021-12-07 | 华能澜沧江水电股份有限公司 | 一种重力坝时空关联监测数据采集与可视化呈现方法 |
CN114354106A (zh) * | 2022-02-09 | 2022-04-15 | 中大检测(湖南)股份有限公司 | 基于risc-v桥梁智能监测预警分析系统 |
CN115456331A (zh) * | 2022-08-03 | 2022-12-09 | 南京河海南自水电自动化有限公司 | 多维多测点模型在线监控算法在监测分析系统平台的应用 |
CN115659729A (zh) * | 2022-10-14 | 2023-01-31 | 南京河海南自水电自动化有限公司 | 一种基于结构仿真计算的大坝安全监测分析方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108228819A (zh) * | 2017-12-29 | 2018-06-29 | 武汉长江仪器自动化研究所有限公司 | 基于大数据平台的大坝变形预测方法 |
CN110728038A (zh) * | 2019-09-26 | 2020-01-24 | 南京河海南自水电自动化有限公司 | 基于回归分析的大坝监测方法 |
CN111222095A (zh) * | 2019-12-19 | 2020-06-02 | 国网电力科学研究院有限公司 | 一种大坝变形监测中的粗差判别方法、装置及系统 |
CN112287608A (zh) * | 2020-11-19 | 2021-01-29 | 中国水利水电科学研究院 | 一种基于模糊综合评价的大坝安全预测系统及方法 |
-
2021
- 2021-02-02 CN CN202110144092.0A patent/CN112989563A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108228819A (zh) * | 2017-12-29 | 2018-06-29 | 武汉长江仪器自动化研究所有限公司 | 基于大数据平台的大坝变形预测方法 |
CN110728038A (zh) * | 2019-09-26 | 2020-01-24 | 南京河海南自水电自动化有限公司 | 基于回归分析的大坝监测方法 |
CN111222095A (zh) * | 2019-12-19 | 2020-06-02 | 国网电力科学研究院有限公司 | 一种大坝变形监测中的粗差判别方法、装置及系统 |
CN112287608A (zh) * | 2020-11-19 | 2021-01-29 | 中国水利水电科学研究院 | 一种基于模糊综合评价的大坝安全预测系统及方法 |
Non-Patent Citations (1)
Title |
---|
杨金仑: "云龙水库大坝安全监测数据分析方法研究", 《中国优秀硕士学位论文全文数据库.工程科技II辑》 * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113762399A (zh) * | 2021-09-10 | 2021-12-07 | 华能澜沧江水电股份有限公司 | 一种重力坝时空关联监测数据采集与可视化呈现方法 |
CN114354106A (zh) * | 2022-02-09 | 2022-04-15 | 中大检测(湖南)股份有限公司 | 基于risc-v桥梁智能监测预警分析系统 |
CN114354106B (zh) * | 2022-02-09 | 2024-03-15 | 中大智能科技股份有限公司 | 基于risc-v桥梁智能监测预警分析系统 |
CN115456331A (zh) * | 2022-08-03 | 2022-12-09 | 南京河海南自水电自动化有限公司 | 多维多测点模型在线监控算法在监测分析系统平台的应用 |
CN115456331B (zh) * | 2022-08-03 | 2024-02-02 | 南京河海南自水电自动化有限公司 | 多维多测点模型在线监控算法在监测分析系统平台的应用 |
CN115659729A (zh) * | 2022-10-14 | 2023-01-31 | 南京河海南自水电自动化有限公司 | 一种基于结构仿真计算的大坝安全监测分析方法及系统 |
CN115659729B (zh) * | 2022-10-14 | 2024-04-16 | 南京河海南自水电自动化有限公司 | 一种基于结构仿真计算的大坝安全监测分析方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112989563A (zh) | 一种大坝安全监测数据分析方法 | |
CN109670267B (zh) | 一种数据处理方法和装置 | |
US8983936B2 (en) | Incremental visualization for structured data in an enterprise-level data store | |
CN113190886A (zh) | 一种基于快速仿真数字孪生技术的设备健康监测方法 | |
CN112819207A (zh) | 基于相似性度量的地质灾害空间预测方法、系统及存储介质 | |
CN106803799B (zh) | 一种性能测试方法和装置 | |
CN115438726A (zh) | 一种基于数字孪生技术的设备寿命与故障类型预测方法及系统 | |
WO2024067387A1 (zh) | 基于特征变量评分的用户画像生成方法,设备、汽车及存储介质 | |
CN115146230A (zh) | 一种古建筑健康监测系统、方法及设备 | |
CN113626335A (zh) | 一种面向公安交通管理应用软件的质量评价方法及系统 | |
CN111859299A (zh) | 大数据指标构建方法、装置、设备及存储介质 | |
CN114219242A (zh) | 车辆装备的效能评估方法及效能评估体系构建系统 | |
CN113850475A (zh) | 一种基于大数据的生产设备性能评估系统 | |
CN113465734B (zh) | 一种结构振动的实时估计方法 | |
KR101973328B1 (ko) | 하둡 기반 공작기계 환경 데이터의 상관관계 분석 및 시각화 방법 | |
Wong et al. | Using geometry-based metrics as part of fitness-for-purpose evaluations of 3D city models | |
Zorn et al. | Replacing energy simulations with surrogate models for design space exploration | |
CN112528159A (zh) | 一种特征质量评估方法、装置、电子设备及存储介质 | |
CN111612356A (zh) | 一种工程质量保险风险管理效果和方案分析方法及系统 | |
CN115796585A (zh) | 一种企业经营风险评估方法及系统 | |
Khokhlov et al. | Data security and quality evaluation framework: Implementation empirical study on android devices | |
CN114048925A (zh) | 一种电网综合运营预警方法、装置及终端设备 | |
CN115392715A (zh) | 一种用电数据风险评估方法、装置、设备及存储介质 | |
CN114117753A (zh) | 基于易损性的概率地震边坡滑移危险性分析方法及装置 | |
CN114154843A (zh) | 一种利用位移监测鉴别边坡失稳致滑因子的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210618 |
|
RJ01 | Rejection of invention patent application after publication |