CN106897509A - 一种动态非高斯结构监测数据异常识别方法 - Google Patents

一种动态非高斯结构监测数据异常识别方法 Download PDF

Info

Publication number
CN106897509A
CN106897509A CN201710084131.6A CN201710084131A CN106897509A CN 106897509 A CN106897509 A CN 106897509A CN 201710084131 A CN201710084131 A CN 201710084131A CN 106897509 A CN106897509 A CN 106897509A
Authority
CN
China
Prior art keywords
dynamic
monitoring data
data
formula
statistic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710084131.6A
Other languages
English (en)
Other versions
CN106897509B (zh
Inventor
黄海宾
伊廷华
李宏男
马树伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Bai Laili Information Technology Co Ltd
Dalian University of Technology
Original Assignee
Dalian Bai Laili Information Technology Co Ltd
Dalian University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Bai Laili Information Technology Co Ltd, Dalian University of Technology filed Critical Dalian Bai Laili Information Technology Co Ltd
Priority to CN201710084131.6A priority Critical patent/CN106897509B/zh
Publication of CN106897509A publication Critical patent/CN106897509A/zh
Priority to US16/090,911 priority patent/US11003738B2/en
Priority to PCT/CN2018/076577 priority patent/WO2018149387A1/zh
Application granted granted Critical
Publication of CN106897509B publication Critical patent/CN106897509B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/18Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2134Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on separation criteria, e.g. independent component analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2135Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on approximation criteria, e.g. principal component analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/29Graphical models, e.g. Bayesian networks
    • G06F18/295Markov models or related models, e.g. semi-Markov models; Markov random fields; Networks embedding Markov models
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M5/00Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
    • G01M5/0008Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings of bridges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/08Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Operations Research (AREA)
  • Probability & Statistics with Applications (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Geometry (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Testing Or Calibration Of Command Recording Devices (AREA)

Abstract

本发明属于土木工程结构健康监测领域,提出了一种动态非高斯结构监测数据异常识别方法。首先,对监测数据定义过去和当前观测向量,并对其进行预白化;其次,对白化后的过去和当前观测向量建立统计相关模型,得到动态白化数据;接着,将动态白化数据划分为系统相关和系统无关部分,并对其进行独立分量分析建模;最后,分别定义两个统计量并确定其控制限,当统计量超过控制限时判断监测数据中存在异常。由于同时考虑了结构监测数据的非高斯性和动态特性,基于此定义的统计量可有效识别数据中的异常。

Description

一种动态非高斯结构监测数据异常识别方法
技术领域
本发明属于土木工程结构健康监测领域,提出了一种动态非高斯结构监测数据异常识别方法。
背景技术
土木工程结构在长期荷载、环境侵蚀和疲劳效应等因素的共同作用下,其服役性能的退化不可避免。深入分析结构监测数据,可以及时发现结构的异常状态并提供准确的安全预警,对确保土木工程结构的安全运营具有重要的现实意义。目前,结构监测数据的异常识别主要通过统计方法实现,一般分为两大类:1)单变量控制图,如休哈特控制图、累积和控制图等,该类方法对每个测点的监测数据分别建立控制图,以识别监测数据中的异常;2)多变量统计分析,如主成分分析、独立分量分析等,该类方法利用多测点监测数据之间的相关性建立统计模型,并定义相应的统计量以识别监测数据中的异常。
由于结构变形的连续性,结构相邻测点的响应数据之间也具有相关性。实际工程应用中,能够考虑这种相关性的多变量统计分析方法更具优越性。然而,由于结构的非线性和测量噪声的复杂性等因素,结构监测数据往往呈现非高斯性;此外,结构监测数据中也存在动态特性(即自相关性)。若能在结构监测数据建模过程中同时考虑非高斯性和动态特性,则可提升多变量统计分析方法的异常识别能力,使其在工程应用中更具实用价值。
发明内容
本发明旨在提出一种动态非高斯结构监测数据建模方法,在此基础上定义两个统计量用于识别数据中的异常。其技术方案是:首先,对监测数据定义过去和当前观测向量,并对其进行预白化;其次,对白化后的过去和当前观测向量建立统计相关模型,得到动态白化数据;接着,将动态白化数据划分为系统相关和系统无关部分,并对其进行独立分量分析建模;最后,分别定义两个统计量并确定其控制限,当统计量超过控制限时判断监测数据中存在异常。
一种动态非高斯结构监测数据异常识别方法,步骤如下:
步骤一:结构监测数据预处理
(1)令表示正常结构监测数据中对应时刻t的样本,m为测量变量个数;定义过去观测向量xp(t)=[xT(t-1),xT(t-2),...,xT(t-τ)]T(注:τ为时延)和当前观测向量xc(t)=x(t);
(2)令Jp和Jc分别表示xp(t)和xc(t)的白化矩阵,则白化后的xp(t)和xc(t)分别为:
步骤二:动态白化
(3)结构监测数据的动态建模即是建立之间的统计相关模型:
式中:表示的互协方差矩阵;为奇异值分解的酉矩阵;为奇异值矩阵,包含的m个非零奇异值;
(4)定义在P上的投影为z(t),则z(t)可通过下式求得:
式中:R=PTJp
(5)由于z(t)的协方差矩阵是一个单位矩阵:
且以上建模过程考虑了结构监测数据的动态特性,故R称为动态白化矩阵,z(t)称为动态白化数据;
步骤三:动态非高斯建模
(6)将动态白化数据z(t)划分为两部分,其计算公式为:
zs(t)=Rsxp(t)
zn(t)=Rnxp(t)
式中:zs(t)和zn(t)分别表示z(t)的系统相关部分和系统无关部分;Rs和Rn分别由R的前m行和后m(τ-1)行构成;
(7)利用独立分量分析对zs(t)和zn(t)建立动态非高斯模型:
式中:ss(t)和sn(t)分别表示系统相关独立分量和系统无关独立分量;Bs和Bn可由快速独立分量分析算法求得;
(8)令则有:
ss(t)=Wsxp(t)
sn(t)=Wnxp(t)
式中:Ws和Wn分别表示系统相关部分和系统无关部分的解混矩阵;
步骤四:定义统计量并确定控制限
(9)分别对ss(t)和sn(t)定义两个统计量:
(10)计算完所有正常结构监测数据对应的统计量后,分别估计的概率密度分布;通过99%置信准则分别确定两个统计量的控制限当新的结构监测数据的统计量超过其对应的控制限时可判断异常发生。
本发明的有益效果:在多变量统计建模过程中同时考虑结构监测数据的非高斯性和动态特性,基于此定义的统计量可有效识别数据中的异常。
附图说明
图1是本发明的基本思路。
具体实施方式
以下结合附图和技术方案,进一步说明本发明的具体实施方式。
选取一座两跨公路桥模型,其长度为5.4864m、宽度为1.8288m。对其建立有限元模型以模拟结构响应,采集12个测点的响应作为监测数据。共生成两个数据集:训练数据集和测试数据集;其中,训练数据集为正常监测数据集,测试数据集中的一部分用于模拟异常监测数据;两个数据集均持续80秒,采样频率为256Hz。本发明的基本思路如图1所示,具体实施方式如下:
(1)对训练数据集中的每个数据点构造过去观测向量xp(t)和当前观测向量xc(t);对所有的xp(t)和xc(t)进行预白化,得到白化矩阵Jp和Jc以及白化后的过去和当前观测向量
(2)对进行统计相关建模,得到动态白化矩阵R;R的前12行组成Rs,其余组成Rn;计算zs(t)=Rsxp(t)和zn(t)=Rnxp(t)。
(3)对zs(t)和zn(t)进行独立分量分析建模,得到矩阵Bs和Bn;相应地,解混矩阵为计算统计量并确定其控制限当统计量超过控制限时判断监测数据中存在异常。
(4)在测试数据集中模拟异常监测数据,即2号传感器在40~80s期间发生异常;利用本发明提出的两个统计量对异常监测数据进行识别,结果表明均能成功识别出监测数据中的异常。

Claims (1)

1.一种动态非高斯结构监测数据异常识别方法,其特征在于,步骤如下:
步骤一:结构监测数据预处理
(1)令表示正常结构监测数据中对应时刻t的样本,m为测量变量个数;定义过去观测向量xp(t)=[xT(t-1),xT(t-2),...,xT(t-τ)]T和当前观测向量xc(t)=x(t),τ为时延;
(2)令Jp和Jc分别表示xp(t)和xc(t)的白化矩阵,则白化后的xp(t)和xc(t)分别为:
步骤二:动态白化
(3)结构监测数据的动态建模即是建立之间的统计相关模型:
S ~ p c = E { x ~ p x ~ c T } = PΣQ T
式中:表示的互协方差矩阵;为奇异值分解的酉矩阵;为奇异值矩阵,包含的m个非零奇异值;
(4)定义在P上的投影为z(t),则z(t)通过下式求得:
z ( t ) = P T x ~ p ( t ) = P T J p x p ( t ) = Rx p ( t )
式中:R=PTJp
(5)由于z(t)的协方差矩阵是一个单位矩阵:
S z z = E { zz T } = P T E { x ~ p x ~ p T } P = I
且以上建模过程考虑了结构监测数据的动态特性,故R称为动态白化矩阵,z(t)称为动态白化数据;
步骤三:动态非高斯建模
(6)将动态白化数据z(t)划分为两部分,其计算公式为:
zs(t)=Rsxp(t)
zn(t)=Rnxp(t)
式中:zs(t)和zn(t)分别表示z(t)的系统相关部分和系统无关部分;Rs和Rn分别由R的前m行和后m(τ-1)行构成;
(7)利用独立分量分析对zs(t)和zn(t)建立动态非高斯模型:
s s ( t ) = B s T z s ( t )
s n ( t ) = B n T z n ( t )
式中:ss(t)和sn(t)分别表示系统相关独立分量和系统无关独立分量;Bs和Bn由快速独立分量分析算法求得;
(8)令则有:
ss(t)=Wsxp(t)
sn(t)=Wnxp(t)
式中:Ws和Wn分别表示系统相关部分和系统无关部分的解混矩阵;
步骤四:定义统计量并确定控制限
(9)分别对ss(t)和sn(t)定义两个统计量:
I s 2 = s s T s s = x p T ( W s T W s ) x p
I n 2 = s n T s n = x p T ( W n T W n ) x p
(10)计算完所有正常结构监测数据对应的统计量后,分别估计的概率密度分布;通过99%置信准则分别确定两个统计量的控制限当新的结构监测数据的统计量超过其对应的控制限时可判断异常发生。
CN201710084131.6A 2017-02-16 2017-02-16 一种动态非高斯结构监测数据异常识别方法 Expired - Fee Related CN106897509B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201710084131.6A CN106897509B (zh) 2017-02-16 2017-02-16 一种动态非高斯结构监测数据异常识别方法
US16/090,911 US11003738B2 (en) 2017-02-16 2018-02-12 Dynamically non-gaussian anomaly identification method for structural monitoring data
PCT/CN2018/076577 WO2018149387A1 (zh) 2017-02-16 2018-02-12 一种动态非高斯结构监测数据异常识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710084131.6A CN106897509B (zh) 2017-02-16 2017-02-16 一种动态非高斯结构监测数据异常识别方法

Publications (2)

Publication Number Publication Date
CN106897509A true CN106897509A (zh) 2017-06-27
CN106897509B CN106897509B (zh) 2020-06-16

Family

ID=59184032

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710084131.6A Expired - Fee Related CN106897509B (zh) 2017-02-16 2017-02-16 一种动态非高斯结构监测数据异常识别方法

Country Status (3)

Country Link
US (1) US11003738B2 (zh)
CN (1) CN106897509B (zh)
WO (1) WO2018149387A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018149387A1 (zh) * 2017-02-16 2018-08-23 大连理工大学 一种动态非高斯结构监测数据异常识别方法
CN111242632A (zh) * 2020-01-07 2020-06-05 石化盈科信息技术有限责任公司 一种识别套现账户的方法、存储介质及电子设备
CN117202077A (zh) * 2023-11-03 2023-12-08 恩平市海天电子科技有限公司 一种麦克风智能校正方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109682561B (zh) * 2019-02-19 2020-06-16 大连理工大学 一种自动检测高速铁路桥梁自由振动响应以识别模态的方法
CN111474911B (zh) * 2020-04-28 2021-03-16 浙江浙能技术研究院有限公司 面向高端燃煤发电装备非平稳运行的高斯非高斯特征协同解析与监测方法
CN112560165A (zh) * 2020-06-11 2021-03-26 中车青岛四方机车车辆股份有限公司 一种城轨车辆及其客室车门故障诊断方法
US11676071B2 (en) * 2020-06-30 2023-06-13 Oracle International Corporation Identifying and ranking anomalous measurements to identify faulty data sources in a multi-source environment
CN118195641A (zh) * 2024-05-17 2024-06-14 智联信通科技股份有限公司 一种基于区块链的智能制造领域生产全流程溯源方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101403923A (zh) * 2008-10-31 2009-04-08 浙江大学 基于非高斯成分提取和支持向量描述的过程监控方法
CN104392136A (zh) * 2014-11-28 2015-03-04 东南大学 一种面向高动态非高斯模型鲁棒测量的高精度数据融合方法
CN104656635A (zh) * 2014-12-31 2015-05-27 重庆科技学院 非高斯动态高含硫天然气净化过程异常检测与诊断方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6892163B1 (en) * 2002-03-08 2005-05-10 Intellectual Assets Llc Surveillance system and method having an adaptive sequential probability fault detection test
US7590513B2 (en) * 2006-01-30 2009-09-15 Nec Laboratories America, Inc. Automated modeling and tracking of transaction flow dynamics for fault detection in complex systems
US9843596B1 (en) * 2007-11-02 2017-12-12 ThetaRay Ltd. Anomaly detection in dynamically evolving data and systems
CN102323049B (zh) 2011-07-18 2013-07-03 福州大学 数据不完备下基于一致性数据替换的结构异常检测方法
US20140108324A1 (en) * 2012-10-12 2014-04-17 Nec Laboratories America, Inc. Data analytic engine towards the self-management of complex physical systems
CN103116804A (zh) 2013-01-31 2013-05-22 苏州科技学院 一种模糊神经网络模型及深基坑变形智能预测方法
WO2014146068A1 (en) * 2013-03-15 2014-09-18 Larimore Wallace A method and system of dynamic model identification for monitoring and control of dynamic machines with variable structure or variable operation conditions
CN103234753A (zh) * 2013-04-11 2013-08-07 华北电力大学 基于高斯过程建模的风电机组轴系状态监测方法
CN106384300B (zh) 2016-09-27 2019-08-16 山东建筑大学 基于大数据和模糊模型的建筑异常用能检测方法及系统
CN106897509B (zh) 2017-02-16 2020-06-16 大连理工大学 一种动态非高斯结构监测数据异常识别方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101403923A (zh) * 2008-10-31 2009-04-08 浙江大学 基于非高斯成分提取和支持向量描述的过程监控方法
CN104392136A (zh) * 2014-11-28 2015-03-04 东南大学 一种面向高动态非高斯模型鲁棒测量的高精度数据融合方法
CN104656635A (zh) * 2014-12-31 2015-05-27 重庆科技学院 非高斯动态高含硫天然气净化过程异常检测与诊断方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018149387A1 (zh) * 2017-02-16 2018-08-23 大连理工大学 一种动态非高斯结构监测数据异常识别方法
US11003738B2 (en) 2017-02-16 2021-05-11 Dalian University Of Technology Dynamically non-gaussian anomaly identification method for structural monitoring data
CN111242632A (zh) * 2020-01-07 2020-06-05 石化盈科信息技术有限责任公司 一种识别套现账户的方法、存储介质及电子设备
CN117202077A (zh) * 2023-11-03 2023-12-08 恩平市海天电子科技有限公司 一种麦克风智能校正方法
CN117202077B (zh) * 2023-11-03 2024-03-01 恩平市海天电子科技有限公司 一种麦克风智能校正方法

Also Published As

Publication number Publication date
US11003738B2 (en) 2021-05-11
CN106897509B (zh) 2020-06-16
US20190121838A1 (en) 2019-04-25
WO2018149387A1 (zh) 2018-08-23

Similar Documents

Publication Publication Date Title
CN106897509A (zh) 一种动态非高斯结构监测数据异常识别方法
CN112202736B (zh) 基于统计学习和深度学习的通信网络异常分类方法
CN108960303B (zh) 一种基于lstm的无人机飞行数据异常检测方法
Wu et al. Modeling and analysis of software fault detection and correction process by considering time dependency
Shyur A stochastic software reliability model with imperfect-debugging and change-point
CN102789545B (zh) 基于退化模型匹配的涡轮发动机剩余寿命的预测方法
CN103729637B (zh) 基于容积卡尔曼滤波的扩展目标概率假设密度滤波方法
Mishra et al. On theoretical and empirical aspects of marginal distribution choice models
CN106897505A (zh) 一种考虑时‑空相关性的结构监测数据异常识别方法
CN106598029B (zh) 基于性能退化的列控车载设备可靠性预测方法
CN104794735A (zh) 基于变分贝叶斯期望最大化的扩展目标跟踪方法
CN104730511A (zh) 星凸模型下的势概率假设密度多扩展目标跟踪方法
CN104766175A (zh) 一种基于时间序列分析的电力系统异常数据辨识与修正方法
KR100867938B1 (ko) 종속변수 유사도와 커널 회귀법을 이용한 발전소 계측기성능감시용 예측방법
WO2020133721A1 (zh) 一种基于非参数贝叶斯框架的信号交叉口状态估计方法
CN109407654A (zh) 一种基于稀疏深度神经网络的工业数据非线性因果分析方法
CN103268519A (zh) 基于改进Lyapunov指数的电力系统短期负荷预测方法及装置
CN103838217B (zh) 一种基于mica-ocsvm的发酵过程故障监测方法
CN105354860A (zh) 基于箱粒子滤波的扩展目标CBMeMBer跟踪方法
CN105629958A (zh) 一种基于子时段mpca-svm的间歇过程故障诊断方法
CN104035431A (zh) 用于非线性过程监控的核函数参数的获取方法和系统
CN103885867B (zh) 一种模拟电路性能的在线评价方法
CN105005294A (zh) 基于不确定性分析的实时传感器故障诊断方法
CN106125713A (zh) 一种区间删失情况下可靠性增长的评估与预测方法
Dong et al. Prognostics 102: efficient Bayesian-based prognostics algorithm in Matlab

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200616

Termination date: 20220216