CN104281130B - 一种基于大数据技术的水电设备监测和故障诊断系统 - Google Patents
一种基于大数据技术的水电设备监测和故障诊断系统 Download PDFInfo
- Publication number
- CN104281130B CN104281130B CN201410487983.6A CN201410487983A CN104281130B CN 104281130 B CN104281130 B CN 104281130B CN 201410487983 A CN201410487983 A CN 201410487983A CN 104281130 B CN104281130 B CN 104281130B
- Authority
- CN
- China
- Prior art keywords
- monitoring
- fault diagnosis
- data
- equipment
- hydroelectric facility
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 122
- 238000003745 diagnosis Methods 0.000 title claims abstract description 72
- 238000005516 engineering process Methods 0.000 title claims abstract description 40
- 238000012800 visualization Methods 0.000 claims abstract description 12
- 238000012549 training Methods 0.000 claims description 17
- 238000004519 manufacturing process Methods 0.000 claims description 12
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 12
- 238000012360 testing method Methods 0.000 claims description 10
- 230000007547 defect Effects 0.000 claims description 5
- 230000007613 environmental effect Effects 0.000 claims description 5
- 238000005259 measurement Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 abstract description 11
- 238000012423 maintenance Methods 0.000 abstract description 4
- 238000007726 management method Methods 0.000 description 26
- 238000003860 storage Methods 0.000 description 15
- 238000013480 data collection Methods 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 6
- 230000009977 dual effect Effects 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 230000008520 organization Effects 0.000 description 4
- 230000004888 barrier function Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008439 repair process Effects 0.000 description 3
- 230000008676 import Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 235000018185 Betula X alpestris Nutrition 0.000 description 1
- 235000018212 Betula X uliginosa Nutrition 0.000 description 1
- 241000251730 Chondrichthyes Species 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- YHXISWVBGDMDLQ-UHFFFAOYSA-N moclobemide Chemical compound C1=CC(Cl)=CC=C1C(=O)NCCN1CCOCC1 YHXISWVBGDMDLQ-UHFFFAOYSA-N 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000009666 routine test Methods 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Remote Monitoring And Control Of Power-Distribution Networks (AREA)
- General Engineering & Computer Science (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开一种基于大数据技术的水电设备监测和故障诊断系统，该系统包括：可视化展现模块，通过状态接入控制器，将子站的被监测信息采集上来，并通过状态接入控制器上传到数据上传服务器，供数据上传服务模块将设备监测数据上传到Hbase数据库中，供查询与统计相关信息，展现设备监测信息和设备相关统计信息；告警管理模块，通过配置设备监测点的组合告警条件产生告警记录；查询与统计模块，用于提供设备监测数据的历史查询、设备相关台帐的综合信息查询功能；故障诊断模块，采用多种故障诊断模型或预测模型，进行设备故障诊断及预警。采用本发明，能够提高设备诊断效率和水平，并为设备状态检修提供基础，降低检修成本，提高供电的可靠性。
Description
技术领域
本发明涉及设备监测和故障诊断应用技术，尤其涉及一种基于大数据技术的水电设备监测和故障诊断系统，适用于对集团级、大集中模式下的水电设备进行监测和故障诊断。
背景技术
近几年，在水电站和抽水蓄能电站领域，其设备监测及故障诊断还没有形成一套成熟体系，设备的监测和故障诊断还停留在设备厂家单套系统的定值报警分析模式。现有的水电站设备系统都是高度集成的成套系统，单个设备、单一数据维度的监测诊断分析，已经不能满足日常生产运行的需要。因此，建立一套基于大数据技术的水电设备监测及故障诊断系统已成为必然趋势。
尤其是当前随着物联网、云计算等新一代信息通信技术的发展，水电站的自动化和信息化水平日益提高，海量的生产实时和状态监测数据得以采集、存储。除此之外，生产管理中的机组等主设备试验、检修报告、安全监测的视频数据等非结构化数据等大量产生，为电力设备的故障诊断提供原始资料。如何最大限度地挖掘数据效益，改变以前信息系统建设侧重系统功能而忽视数据效益的状况，大数据技术应运而生，为电力设备的状态监测和故障诊断提供了有效手段。
近年来为了满足调峰调频和多种能源协调的需要，抽水蓄能和常规水电机组规模迅速发展，电站主设备的数量急剧增加，定期检修工作量剧增，检修人员紧缺问题日益突出。同时随着新投产的设备制造质量的大幅提升，集成式、少维护设备得到大量采用，早期定制的设备定期检修、定期试验已不能适应新设备检修的要求。因此对水电站而言，增加一套在线监测和故障诊断系统辅助设备进行状态检修已变得非常迫切和必要。
目前有些水电站为了提高设备安全运行，安装了一些设备状态监测系统，在同一电站里各个设备状态监测系统各自为政，孤立运行，孤立诊断，资源不能共享，没有实现设备信息的综合利用，不能实现完整的设备状态诊断和辅助决策；同时各厂家在线监测系统采集的信息内容不同，使用的技术手段不同，遵循的技术标准也不尽相同，缺乏一个统一的信息采集规范。因此各自为政的在线监测系统对集中管理水电站在线监测和故障诊断极为不利。
发明内容
有鉴于此，本发明的主要目的在于提供一种基于大数据技术的水电设备监测和故障诊断系统，为以水电站和抽水蓄能电站等发电企业的状态检修、生产运行、实时管控、生产管理、智能决策提供坚强支撑；以提高设备诊断效率和水平，并为设备状态检修提供基础，降低检修成本，提高供电的可靠性。
为达到上述目的，本发明的技术方案是这样实现的：
一种基于大数据技术的水电设备监测和故障诊断系统，该系统包括可视化展现模块、告警管理模块、查询与统计模块以及故障诊断模块；其中：
可视化展现模块，通过状态接入控制器，对水电设备进行状态监测，并通过数据上传服务对设备监测的结果数据进行上传并存储到Hbase数据库中，然后以web应用的方式，提供查询与统计Hbase数据库存储的设备台帐相关信息，展现设备监测信息和设备相关统计信息；
告警管理模块，通过配置设备监测点的上限值、下限值、上上限、下下限以及多个监测点的组合告警条件，产生告警记录，并发出提醒信息；
查询与统计模块，用于提供设备监测数据的历史查询、设备相关台帐的综合信息查询、设备监测告警记录的统计、设备运行工况信息的统计功能；以及，
故障诊断模块，采用聚类分类模型、预测模型，进行设备故障诊断及预警。预测模型选择贝叶斯网络故障诊断模型。
其中，所述可视化展现模块具体包括大坝安全监测子模块、水利测量监测子模块、水轮机组监测子模块、变压器监测子模块、断路器监测子模块、容性设备监测子模块、避雷器监测子模块以及微气象环境监测子模块。
所述通过数据上传服务对设备监测的结果数据进行上传，具体包括：利用状态接入控制器的监测层与接入层之间的I1接口，面向被监测装置即子站，采用DL/T80接口协议将子站的被监测信息采集上来，并通过所述状态接入控制器的位于接入层到主站层之间的I2接口定时上传到主站的CAG接入网关；利用CAG接入网关向数据上传服务器发送XML文件，经数据上传服务模块将设备监测数据上传到Hbase数据库中。
所述设备的监测结果数据，主要包括生产管理系统中的设备台帐信息、缺陷信息、试验信息、运行信息、检修信息、生产厂家信息。
所述告警管理模块包括事件告警配置、短信告警配置、短信告警查询、事件告警查询子模块。
所述故障诊断模块，包括包含模型设置、模型训练、模型验证、故障诊断、故障预警子模块。
所述故障诊断模块，进一步包括通过模型设置功能，确定采用的模型和模型的细节调整；通过对水电设备的海量数据进行模型训练，满足模型求解的数据支撑；通过外部输入数据测试，验证模型准确性，以便对模型设置进行微调，达到准确的故障诊断和预警。
本发明所提供的基于大数据技术的水电设备监测和故障诊断系统，具有以下优点：
相较于现有技术，本发明通过采用统一的状态接入控制器(CAC)，实现了子站数据的统一接入；其数据存储采用统一的分布式、高性能、可扩展的列数据库Hbase，能够实现海量数据存储的负载均衡和动态扩展。
采用本发明，能够有效整合目前水电设备在线监测系统各自为政、状态诊断单一、信息不能共享等问题，充分利用现有水电生产运行数据、生产管理数据(试验和检修历史数据)、状态监测数据等大量的实时、历史数据，采用大数据技术进行水电设备故障诊断和预警，极大提高了水电设备故障诊断效率和准确性。
附图说明
图1为大数据技术架构图；
图2为本发明实施例的Spark集群部署架构图；
图3为基于大数据技术的水电设备监测数据采集与存储结构图；
图4为基于大数据技术的水电设备监测与故障诊断系统功能图。
具体实施方式
下面结合附图及本发明的实施例对本发明的基于大数据技术的水电设备监测和故障诊断系统作进一步详细的说明。
图1为大数据技术架构图。如图1所示，该大数据技术架构采用开源的大数据技术相关的项目Apache Spark(以下简称Spark)和Apache Hadoop(以下简称Hadoop)、ApacheHbase(以下简称Hbase)相结合技术，以Spark集群架构为主，集成Hadoop和Hbase。
这里，所述Spark是一个通用的并行计算框架，Spark的弹性分布式数据集(Resilient Distributed Dataset，RDD)是基于内存计算、快速迭代的数据集合，运算效率比Hadoop分布式文件系统(Hadoop Distributed File System，HDFS)快一百二十倍，RDD兼容Hadoop的HDFS文件(Spark会把HDFS文件封装成RDD对象)，另外Spark的分布式计算MapReduce算法比传统的Hadoop Map Reduce的性能更好，并且操作数据集更加丰富。
Spark集群方式主要有以下三种：单主机模式，是一种简单的集群管理，一个SparkMaster和多个Spark worker组成，Spark非常容易搭建的一种集群模式；ApacheMesos模式，是一种通用的集群管理,可以运行Hadoop的MapReduce和服务应用的模式；Hadoop YARN(Yet Another Resource Negotiator)模式，则是Hadoop2.0中的资源管理模式，从Hadoop0.23.0版本开始，Hadoop的MapReduce框架完全重构，新的HadoopMapReduce框架命名为MapReduceV2或者叫Yarn。优选的，采用Apache Mesos集群模式，Mesos提供了高效、跨分布式应用程序和框架的资源隔离和共享功能，支持Hadoop和Spark。Mesos支持多种资源计划分配(内存和CPU)，提供Java、Python和C++APIs来开发新的并行应用程序，提供基于Web的用户界面来提查看集群状态。
所述Hbase是高性能、高可靠性、可伸缩的分布式非关系列数据库，是构建在Hadoop HDFS之上的数据库，主要用于海量结构化、非结构化数据存储，能够对大型数据提供随机、实时的读写访问。Hbase可存储上T甚至P级别数据文件，Hbase目标主要依靠横向扩展，通过不断增加廉价的PC服务器，来增加计算和存储能力。使用Hbase数据库存储海量数据而不使用Hadoop的HDFS，是因为HDFS不适合在并发环境下的写入和修改，也不适合瞬时(毫秒级)的实时数据获取。使用Spark的分布式计算架构，而不使用Hadoop的计算架构，是因为Spark的计算性能、通用性、容错性等都比Hadoop好，另外还能有效地利用Spark的流处理技术(Streaming)、SQL处理技术(Shark)、机器学习技术(MLlib)等功能实现快速的大数据分析。可选的，也可以采用开源的Hypertable数据库代替Hbase，Hypertable和Hbase都是基于Google BigTable的两个开源实现，HBase主要使用Java语言开发，而Hypertable使用Boost C++开发。
图2为本发明实施例的Spark集群部署架构图，如图2所示的Spark集群架构图，Spark应用在集群上以独立的进程集合运行，在驱动程序(即主程序)中以Spark环境对象(即SparkContext)来协调。在集群上运行时，Spark环境可以与不同的集群管理器(Spark单主机集群管理器或者Apache Mesos/Hadoop YARN集群管理器)相连接，这些集群管理器可以在应用间分配资源；Spark环境一旦连接上集群管理器，Spark需要在集群上的执行节点，也就是那些执行计算和存储应用数据的工作进程；然后，它将应用代码(以Java打包后的JAR文件或者Python定义的文件并传送到Spark环境)发送到执行者节点；最后，Spark环境发送任务让执行节点运行。
所述设备监测数据采集与存储，是利用业界成熟的状态接入控制器(CAC)对水电设备进行状态监测，并通过数据上传服务对设备监测的结果数据进行上传操作，存储到分布式、非结构化、列存储数据库Hbase中。
图3为基于大数据技术的水电设备监测数据采集与存储结构图。如图3所示，状态接入控制器(CAC)提供两个层面接口：即I1和I2。其中，I1接口是监测层与接入层之间的接口，面向被监测装置即子站，采用较为底层的DL/T 860接口协议实现。I2接口则是接入层到主站层之间的接口，面向主站，采用具有良好扩展性的Web服务方式实现。主站通过CAG接入网关将状态接入控制器(CAC)的监测数据接入到CAG，一个CAG可以接入多个状态接入控制器。CAG接入网关向数据上传服务器发送XML文件，供数据上传服务将设备监测数据上传到Hbase中。
水电设备监测数据，一般是基于时间序列的数据，实时性强、数据量大，不适合关系数据库存储，采用高性能、高可靠性、可伸缩的分布式非结构化列存储数据库Hbase来存储，非常合适。
所述管理数据采集，即通过Web服务方式，实现管理数据的采集，包括生产管理系统中的设备台帐信息、缺陷信息、试验信息、运行信息、检修信息、生产厂家信息等。可以提供两种Web服务接口，一种是实时的数据发送、接收；另一种是按一定时间周期(如每隔30分钟)进行查询、接收。实时Web服务是指生产管理系统一旦新增、修改或删除一个设备台帐信息时，就会将修改结果通过Web服务发送过来，Web服务接收到数据后，将数据更新到Hbase数据库中。定时Web服务是指按照一定的时间周期(如30分钟)定时向生产管理系统发送增量数据查询服务，并将查询到的数据更新到Hbase数据库中。对于设备台帐初始数据的更新，可以使用关系数据库导出到文件，在通过编写程序写入到Hbase数据库中。
所述设备监测展现，即编写Web应用程序，查询和统计Hbase数据库存储的设备台帐相关信息，展现设备监测信息和设备相关统计信息。包括可视化展现、告警管理、查询与统计三个功能模块，如图4所示。
这里，所述可视化展现模块，包含大坝安全监测、水利测量监测、水轮机组监测、变压器监测、断路器监测、溶性设备监测、避雷器监测、微气象环境监测等子模块。
所述告警管理模块包括事件告警配置、短信告警配置、短信告警查询、事件告警查询子模块。
所述查询与统计模块包括监测数据查询、设备综合查询、告警统计、运行工况统计模块。
可视化展现模块，是使用可视化的、非常直观的图形来描述现实世界中的设备、厂房、地理位置等要素，外加关注的热点数据(设备监测信息)实时显示，并可以点击热点数据，展现热点数据的详细信息。
告警管理模块，包括事件告警和短信告警子模块两部分，均通过配置设备监测点的上限值、下限值、上上限、下下限以及多个监测点的组合告警条件，组合告警条件是一个条件表达式，可组合多个监测点数据，一旦取得的设备监测数据超过设置的上限值、上上限值或低于下限值、下下限值或满足组合告警条件，就产生告警记录，如果配置了短信告警，同时向相关人员发送短信提醒。
查询与统计模块，包括设备监测数据的历史查询、设备相关台帐的综合信息查询、设备监测告警记录的统计、设备运行工况信息的统计等。
设备的故障诊断模块，包含模型设置、模型训练、模型验证、故障诊断、故障预警等子模块，如图4所示，属于基于大数据技术的水电设备监测和故障诊断系统的一个模块。
大数据技术的故障诊断技术主要采用聚类分析(K-means、Birch)模型、贝叶斯网络故障诊断模型等预测模型(基于时间序列Arima预测模型、神经网络预测模型)等，进行设备故障诊断及预警。通过模型设置功能，确定采用的模型和模型的细节调整；通过对水电设备的海量数据(与设备相关的监测数据、台帐数据、技术参数、检修数据、试验数据、缺陷数据、运行数据)进行模型训练，满足模型求解的数据支撑；通过外部输入数据测试，验证模型准确性，以便对模型设置进行微调，达到准确故障诊断和预警的目的。故障诊断功能对已经存在故障的设备进行故障诊断分析，确定故障类型、故障位置和解决办法。故障预警是预测一定范围内的设备在一定时间范围内(如一天、一周、一月、一年)后设备是否会发生故障，以及发生何种故障。
本发明基于大数据技术的水电设备监测和故障诊断系统，主要包括大数据技术架构、水电设备监测数据采集与存储、管理数据采集、设备监测展现以及设备故障诊断功能模块。
所述基于大数据技术的水电设备监测和故障诊断系统的设计与实现，主要包括：大数据技术架构搭建和故障诊断子系统、基于大数据技术的水电设备监测数据采集与存储子系统、基于大数据技术的水电设备监测与故障诊断子系统。其具体的实现方式详述如下：
所述大数据技术架构搭建和故障诊断子系统，即在开源Linux操作系统(如Ubuntu12.04)上，安装Java运行环境JDK1.6或以上版本，部署基于分布式集群架构的Spark和Hbase，其中Spark用于大数据环境下的故障诊断，包括模型训练、模型验证、故障诊断、故障预警等4个模块，均通过Spark程序实现具体功能，部署在大数据环境下运行，充分利用Spark的分布式内存运算优势，实现海量数据的快速分析。Hbase用于大数据存储，包括设备监测数据、设备台帐相关数据。采用的Spark版本为2014年7月11日发布的Spark 1.01forHadoop2，采用的Hbase版本是2014年7月3日发布的Hbase-0.94.21，采用的Spark集群管理器版本是2014年6月9日发布的Mesos-0.19.0，采用的Hbase集群管理器版本是2014年3月10日发布的Zookeeper-3.4.6。
从最简单的大数据集群环境部署，需要六台服务器，其中两台运行Spark集群(一主一备)、两台运行Hbase集群(一主一备)、一台运行主Web应用程序，另一台用于数据上传服务(包括管理数据采集)，这六台服务器都部署在主站内，搭建集群环境的详细配置不再赘述。从Spark和Hbase集群能力上来说，集群台数没有限制，一般集群台数越多，性能越好，在正式环境中，集群部署几千台PC服务器是没有问题的。
所述基于大数据技术的水电设备监测数据采集与存储子系统，即通过状态接入控制器，实现子站设备监测数据的采集与上传，通过CAG接入网关，实现所有子站数据上传到主站，并将数据以Xml文件形式上传到指定的数据上传服务器；数据上传服务器中的数据上传服务是一个Java任务调度程序，每隔一段时间(如30秒)进行一次数据上传操作，通过Hbase提供的Java接口将数据写入Hbase数据库，实现对设备监测数据(本地Xml文件)和生产管理系统中设备台帐相关数据(设备台帐数据、设备技术参数、设备检修数据、设备试验数据、设备缺陷数据、设备运行数据、设备生产厂家)上传到Hbase数据库中；其中与生产管理系统的数据接口使用Web服务方式进行；与设备监测数据接口使用JavaIO(InputStream/OutputSteam)流处理。
所述基于大数据技术的水电设备监测与故障诊断系统，即编写J2EE Web程序，实现可视化展现、告警管理、查询与统计、故障诊断等模块的功能。Web程序使用Spring4框架，用于编写Web后台业务逻辑和前台界面展现，后台数据库采用Hbase。由于Hbase不是关系数据库，所以不能使用对象关系映射(Object Relational Mapping，ORM)框架(如Hibernate)，需要自己编写一套基于Hbase的数据访问层接口(与普通SQL不同)，提供对Hbase表的增加、删除、修改、查找操作。
可视化展现模块，主要是利用可视化的图形和实时测点数据展现设备监测信息，包括大坝安全监测、水利测量监测、水轮机组监测、变压器监测、断路器监测、溶性设备监测、避雷器监测、微气象环境监测等。实时测点数据展现是通过Ajax+javascript的定时函数(setInterval(fun,time))实现的，通过前台的Ajax，调用后台的数据查询，并将结果显示在页面上。
告警管理模块，用于实现事件告警和短信告警条件的配置维护，以及产生的事件告警和短信告警记录的查询功能。事件告警配置中可以配置单个测点的上上限(二级告警)、上限(一级告警)、下限(一级告警)、下下限(二级告警)，也可以配置多个测点组成的复杂告警条件(组合告警)。告警管理模块包含一个告警数据生成功能，一般写在数据库的存储过程中，如果通过Java程序实现，性能要差不少。由于Hbase数据库没有存储过程，只能通过Java程序来实现，即每隔一段时间(如15秒)查询所有复杂事件告警条件(组合告警)和单测点告警条件(一、二级告警)，将当前测点数据放入事件告警条件中的测点变量，若事件告警条件成立(单测点告警条件：大于上上限或小于下下限属于二级告警，大于上限且小于上上限或小于下限且大于下下限属于一级告警)，则判断当前告警是否已经存在当前告警记录中，如果不存在则增加事件告警记录，如果配置了短信告警，同时向相关人员发送短信提醒。
查询与统计模块，用于实现测点数据查询、综合设备查询、告警统计、运行工况统计。测点数据查询是按照电站、设备类型、电压等级、设备名称、测点名称、开始时间、结束时间来查询设备测点的历史数据，并提供折线图展现数据整体变化趋势。综合设备查询是按设备列表、技术参数、缺陷记录、检修记录、试验记录、运行记录、监测记录等Tab页，其中每个Tab页都提供常用查询条件(如电站、电压等级、设备类型、设备名称、开始时间、结束时间)查询，默认是选中设备列表中的一行记录后，切换到其它标签页时，其它标签页显示当前选中设备的相关记录。告警统计是统计一段时间内(年/月)按电站、电压等级、设备类型、设备名称、告警等级、告警次数进行统计。运行工况统计是通过设备监测点状态(正常/异常)和监测数据统计设备整体运行工况，按电站、电压等级、设备类型、设备名称、正常运行率(监测状态正常时间/监测时间)、一级告警率(一级告警时长/监测时长)、二级告警率(二级告警时长/监测时长)进行统计。
所述故障诊断模块中，模型设置子模块是确定故障诊断和故障预警所采用的模型，以及模型的边界设置，属于模型配置信息，保存在Hbase数据库中。Web程序中的模型训练负责对训练数据的范围进行确定，并可以接收外部特定格式的训练数据导入，将数据训练范围或接收的外部训练数据都存储在Hbase中后，向大数据环境发送执行模型训练指令(中间通过大数据环境集群主机上部署的Web服务，在Web服务中执行大数据故障诊断程序的批处理)，大数据环境接收到执行模型训练指令后，执行模型训练，模型训练子模块会读取Hbase中的模型训练配置信息，并对训练数据进行MapReduce式的任务分解，任务分解过程中进行模型数据训练，任务聚合时，将当前完成进度信息写入Hbase中，Web程序中，通过不断读取Hbase中的进度信息，显示当前模型训练进度情况。模型验证、故障诊断、故障预警等子模块都是采用上述方法实现。模型验证子模块是通过外部数据导入(设备故障数据或正常数据)，验证模型准确性。故障诊断子模块是对已经发生故障的设备进行诊断，确定故障类型、故障位置和解决办法，可以直接通过条件选择故障设备或导入故障设备进行分析。故障预警子模块是预测一定范围内(整个系统、电站、某一设备类型、某一电压等级、某一生产厂家、某一设备型号、某一具体设备等条件)的设备在一定时间范围(如一天、一周、一月、一年)内设备是否会发生故障，以及发生何种故障。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。
Claims (8)
1.一种基于大数据技术的水电设备监测和故障诊断系统，其特征在于，该系统包括可视化展现模块、告警管理模块、查询与统计模块以及故障诊断模块；其中：
可视化展现模块，通过状态接入控制器，对水电设备进行状态监测，并通过数据上传服务器对水电设备监测的结果数据进行上传并存储到Hbase数据库中，然后以web应用的方式，提供查询与统计Hbase数据库存储的水电设备台帐相关信息，展现水电设备监测信息和水电设备相关统计信息；
告警管理模块，通过配置水电设备监测点的上限值、下限值、上上限、下下限以及多个监测点的组合告警条件，产生告警记录，并发出提醒信息；
查询与统计模块，用于提供水电设备监测的结果数据的历史查询、水电设备相关台帐的综合信息查询、水电设备监测告警记录的统计、水电设备运行工况信息的统计功能；以及，
故障诊断模块，采用聚类分析模型、预测模型，进行水电设备故障诊断及预警。
2.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述可视化展现模块具体包括大坝安全监测子模块、水利测量监测子模块、水轮机组监测子模块、变压器监测子模块、断路器监测子模块、容性设备监测子模块、避雷器监测子模块以及微气象环境监测子模块。
3.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述通过数据上传服务器对水电设备监测的结果数据进行上传，具体包括：利用状态接入控制器的监测层与接入层之间的I1接口，面向被监测装置即子站，采用DL/T80接口协议将子站的被监测信息采集上来，并通过所述状态接入控制器的位于接入层到主站层之间的I2接口定时上传到主站的CAG接入网关；利用CAG接入网关向数据上传服务器发送XML文件，经数据上传服务器将水电设备监测的结果数据上传到Hbase数据库中。
4.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述水电设备的监测结果数据，主要包括生产管理系统中的水电设备台帐信息、缺陷信息、试验信息、运行信息、检修信息、生产厂家信息。
5.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述告警管理模块包括事件告警配置、短信告警配置、短信告警查询、事件告警查询子模块。
6.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述故障诊断模块，包括包含模型设置、模型训练、模型验证、故障诊断、故障预警子模块。
7.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述故障诊断模块，进一步包括通过模型设置功能，确定采用的模型和模型的细节调整；通过对水电设备的海量数据进行模型训练，满足模型求解的数据支撑；通过外部输入数据测试，验证模型准确性，以便对模型设置进行微调，达到准确的故障诊断和预警。
8.根据权利要求1所述的基于大数据技术的水电设备监测和故障诊断系统，其特征在于，所述预测模型采用贝叶斯网络故障诊断模型。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410487983.6A CN104281130B (zh) | 2014-09-22 | 2014-09-22 | 一种基于大数据技术的水电设备监测和故障诊断系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410487983.6A CN104281130B (zh) | 2014-09-22 | 2014-09-22 | 一种基于大数据技术的水电设备监测和故障诊断系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104281130A CN104281130A (zh) | 2015-01-14 |
| CN104281130B true CN104281130B (zh) | 2017-05-10 |
Family
ID=52256114
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410487983.6A Active CN104281130B (zh) | 2014-09-22 | 2014-09-22 | 一种基于大数据技术的水电设备监测和故障诊断系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104281130B (zh) |
Families Citing this family (45)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104820700B (zh) * | 2015-05-08 | 2018-07-20 | 中国南方电网有限责任公司电网技术研究中心 | 变电站非结构化数据的处理方法 |
| CN104899561A (zh) * | 2015-05-27 | 2015-09-09 | 华南理工大学 | 一种并行化的人体行为识别方法 |
| CN105930324A (zh) * | 2015-10-26 | 2016-09-07 | 上海剑桥科技股份有限公司 | 设备数据读取方法及系统 |
| CN105278524B (zh) * | 2015-11-10 | 2018-10-26 | 国家电网公司 | 一种开放型水电机组故障诊断系统 |
| CN106708692B (zh) * | 2015-11-13 | 2019-09-27 | 菜鸟智能物流控股有限公司 | 建立过滤报警模型的方法和装置以及过滤报警的方法、装置和电子设备 |
| CN105353702B (zh) * | 2015-11-17 | 2020-12-04 | 国家电网公司 | 高压设备智能监控系统 |
| CN105652232B (zh) * | 2015-12-30 | 2018-04-06 | 国家电网公司 | 一种基于流处理的电能计量装置在线异常诊断方法及系统 |
| CN106325252A (zh) * | 2016-09-28 | 2017-01-11 | 华北电力大学 | 多层大跨度面向大数据的电力设备状态监测与评估系统 |
| CN106547882A (zh) * | 2016-11-03 | 2017-03-29 | 国网重庆市电力公司电力科学研究院 | 一种智能电网中营销大数据的实时处理方法及系统 |
| CN106503235B (zh) * | 2016-11-07 | 2019-04-05 | 云南大学 | 基于Spark平台的XP-EHH算法的分布式处理实现方法 |
| CN106570788A (zh) * | 2016-11-09 | 2017-04-19 | 北京许继电气有限公司 | 一种水电运检可视化辅助决策系统 |
| CN106651008A (zh) * | 2016-11-23 | 2017-05-10 | 长江水利委员会水文局 | 一种面向水文预报的通用网络服务构建方法 |
| CN106897743B (zh) * | 2017-02-22 | 2020-05-05 | 广州市勤思网络科技有限公司 | 基于贝叶斯模型的移动考勤防作弊大数据检测方法 |
| CN107025274A (zh) * | 2017-03-21 | 2017-08-08 | 华中科技大学 | 基于Hadoop的设备健康状态智能感知系统及方法 |
| CN109255440B (zh) * | 2017-07-11 | 2020-08-04 | 上海有孚网络股份有限公司 | 基于递归神经网络（rnn）的对电力生产设备进行预测性维护的方法 |
| CN107480341B (zh) * | 2017-07-21 | 2018-10-23 | 河海大学 | 一种基于深度学习的大坝安全综合评判方法 |
| CN107862375A (zh) * | 2017-10-30 | 2018-03-30 | 北京计算机技术及应用研究所 | 一种两阶段的设备故障诊断方法 |
| CN107870275A (zh) * | 2017-11-03 | 2018-04-03 | 福建和盛高科技产业有限公司 | 基于大数据的避雷器运行状态评价方法 |
| CN107895176B (zh) * | 2017-11-13 | 2021-08-24 | 国网湖南省电力有限公司 | 一种面向水电机群广域监测诊断的雾计算系统及方法 |
| CN108199922B (zh) * | 2018-01-11 | 2021-07-13 | 承德石油高等专科学校 | 一种用于网络设备及服务器故障诊断和修复的系统和方法 |
| CN108268953A (zh) * | 2018-01-12 | 2018-07-10 | 天津瑞源电气有限公司 | 基于特征数据采集算法的设备追溯方法 |
| CN108333454A (zh) * | 2018-03-22 | 2018-07-27 | 四川天誉智水科技有限公司 | 分布式水利网点设备的大数据安监系统 |
| CN108489530A (zh) * | 2018-03-22 | 2018-09-04 | 四川天誉智水科技有限公司 | 水利系统远程大数据调试方法 |
| CN108459264A (zh) * | 2018-03-22 | 2018-08-28 | 四川天誉智水科技有限公司 | 基于大数据的水利设备维护方法 |
| CN108537464A (zh) * | 2018-04-23 | 2018-09-14 | 国家电网公司 | 基于云平台的预警与状态评价方法以及系统 |
| CN108763308A (zh) * | 2018-04-24 | 2018-11-06 | 北京首都机场动力能源有限公司 | 一种供电站资料查询管理方法以及系统 |
| CN108763831B (zh) * | 2018-06-25 | 2022-05-31 | 国家电网有限公司 | 一种水泵水轮机线性模型参数辨识方法 |
| CN109063842A (zh) * | 2018-07-06 | 2018-12-21 | 无锡雪浪数制科技有限公司 | 一种兼容多种算法框架的机器学习平台 |
| CN109598641A (zh) * | 2018-11-30 | 2019-04-09 | 海南电网有限责任公司文昌供电局 | 一种保供电工作管控系统 |
| CN110007654A (zh) * | 2019-04-10 | 2019-07-12 | 华夏天信（北京）智能低碳技术研究院有限公司 | 一种基于Red-Sensor传感器的生产大数据服务系统 |
| CN110457861B (zh) * | 2019-08-22 | 2023-01-20 | 佛山科学技术学院 | 一种机载涡轴发动机动力系统可视化诊断平台及构建方法 |
| CN110543505B (zh) * | 2019-09-06 | 2022-02-18 | 北京远舢智能科技有限公司 | 一种基于时间序列数据的监测系统 |
| CN111628570B (zh) * | 2020-04-20 | 2021-05-14 | 国能大渡河流域水电开发有限公司 | 水电站安全监测故障诊断方法及系统 |
| CN113758704B (zh) * | 2020-06-05 | 2024-02-27 | 国核电站运行服务技术有限公司 | 阀门智能诊断监测系统、方法、终端以及智能终端 |
| CN112100711B (zh) * | 2020-08-10 | 2022-11-08 | 南昌大学 | 一种基于arima和pso-elm的混凝土坝变形组合预报模型构建方法 |
| CN112363432A (zh) * | 2020-11-12 | 2021-02-12 | 江西省港航建设投资集团有限公司 | 一种水电站辅助设备的监测系统及监测方法 |
| CN113204227B (zh) * | 2021-04-26 | 2023-04-18 | 江苏徐工工程机械研究院有限公司 | 一种分层式模块化工程机械机云协同故障诊断系统及方法 |
| CN113159731A (zh) * | 2021-05-12 | 2021-07-23 | 河南雪城软件有限公司 | 污染源自动监控数据智能分析系统及方法 |
| CN113269335B (zh) * | 2021-05-26 | 2024-10-15 | 长春启璞科技信息咨询有限公司 | 焊缝缺陷分析管理系统及分析管理方法 |
| CN113984117A (zh) * | 2021-10-21 | 2022-01-28 | 山脉科技股份有限公司 | 一种水库安全监测系统应用方法 |
| CN114898533A (zh) * | 2022-02-28 | 2022-08-12 | 国电南京自动化股份有限公司 | 一种水利水电智能报警方法及系统 |
| CN114742475A (zh) * | 2022-05-23 | 2022-07-12 | 中国人民解放军海军工程大学 | 一种大数据综合管理系统 |
| CN115469585B (zh) * | 2022-09-26 | 2023-07-25 | 广州健新科技有限责任公司 | 一种基于大数据的水电机组状态监测方法及系统 |
| CN116757448B (zh) * | 2023-08-16 | 2023-10-20 | 江苏汇励丰节能环保科技有限公司 | 一种基于物联网的公共区域智能节水管理系统 |
| CN118537154B (zh) * | 2024-07-25 | 2024-10-01 | 国网安徽省电力有限公司营销服务中心 | 一种账款分区预警管理方法及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN201247097Y (zh) * | 2008-08-12 | 2009-05-27 | 西安理工大学 | 水电机组振动监测及分析装置 |
| CN102404401A (zh) * | 2011-11-22 | 2012-04-04 | 三峡大学 | 基于wsn的机群状态监测系统及方法 |
| CN102778874A (zh) * | 2012-07-12 | 2012-11-14 | 贵州乌江水电开发有限责任公司 | 梯级水电站群联合优化调控系统 |
| CN103067941A (zh) * | 2012-12-26 | 2013-04-24 | 武汉大学 | 基于无线传感网络的多变量分布式在线监测系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7783429B2 (en) * | 2005-02-18 | 2010-08-24 | Charite'-Universitatsmedizin Berlin | Peptide sequencing from peptide fragmentation mass spectra |
-
2014
- 2014-09-22 CN CN201410487983.6A patent/CN104281130B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN201247097Y (zh) * | 2008-08-12 | 2009-05-27 | 西安理工大学 | 水电机组振动监测及分析装置 |
| CN102404401A (zh) * | 2011-11-22 | 2012-04-04 | 三峡大学 | 基于wsn的机群状态监测系统及方法 |
| CN102778874A (zh) * | 2012-07-12 | 2012-11-14 | 贵州乌江水电开发有限责任公司 | 梯级水电站群联合优化调控系统 |
| CN103067941A (zh) * | 2012-12-26 | 2013-04-24 | 武汉大学 | 基于无线传感网络的多变量分布式在线监测系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104281130A (zh) | 2015-01-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104281130B (zh) | 一种基于大数据技术的水电设备监测和故障诊断系统 | |
| US10962999B2 (en) | Microgrid model based automated real time simulation for market based electric power system optimization | |
| CN108345282B (zh) | 一种基于人工智能的泵站运行异常诊断方法及系统 | |
| CN102736593B (zh) | 一种风电场群远程管控一体化平台系统 | |
| CN102882969B (zh) | 一种工矿企业的安全生产云服务平台 | |
| JP5616330B2 (ja) | 電力グリッドを管理する方法およびシステム | |
| CN102932419B (zh) | 一种用于面向工矿企业的安全生产云服务平台的数据存储系统 | |
| CN102917032B (zh) | 一种工矿企业的安全生产云服务平台 | |
| CN110278102A (zh) | 一种it自动化运维系统和方法 | |
| CN107733986A (zh) | 支持一体化部署及监控的保护运行大数据支撑平台 | |
| CN108092813A (zh) | 数据中心综合管理系统服务器硬件管理框架及实现方法 | |
| CN105323111A (zh) | 一种运维自动化系统及方法 | |
| Lamba et al. | Uses of cluster computing techniques to perform big data analytics for smart grid automation system | |
| CN104182902A (zh) | 一种基于调度数据网集中运维系统的监控方法 | |
| CN104777813A (zh) | 综合气象观测运行监控系统及其监控方法 | |
| CA2776436A1 (en) | Real-time microgrid power analytics portal for mission critical power systems | |
| CN102903011A (zh) | 一种用于面向工矿企业的安全生产云服务平台的海量数据处理系统 | |
| CN107968482A (zh) | 一种新能源发电场站管理平台 | |
| CN108418849A (zh) | 一种油气管道scada系统 | |
| CN102903010A (zh) | 一种用于面向工矿企业的安全生产云服务平台的基于支持向量机的异常判断方法 | |
| CN108777637A (zh) | 一种支持服务器异构的数据中心综合管理系统和方法 | |
| CN102929827A (zh) | 一种用于面向工矿企业的安全生产云服务平台的无线传感器数据采集集群 | |
| CN101673100A (zh) | 一种工艺过程参数的采集方法及系统 | |
| CN107657389A (zh) | 一种电力需求侧管理平台 | |
| CN111082521A (zh) | 一种电网调控系统的运维数据监视方法及运维系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |