CN106815774A - 基于cep引擎的变电站运行监控信号规范化处理方法 - Google Patents

基于cep引擎的变电站运行监控信号规范化处理方法 Download PDF

Info

Publication number
CN106815774A
CN106815774A CN201510876137.8A CN201510876137A CN106815774A CN 106815774 A CN106815774 A CN 106815774A CN 201510876137 A CN201510876137 A CN 201510876137A CN 106815774 A CN106815774 A CN 106815774A
Authority
CN
China
Prior art keywords
monitoring signal
data
operation monitoring
signal
processing method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510876137.8A
Other languages
English (en)
Inventor
艾明浩
蒲天骄
葛贤军
陈乃仕
李志宏
李烨
王晓辉
赵立强
李丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
China Electric Power Research Institute Co Ltd CEPRI
Original Assignee
State Grid Corp of China SGCC
China Electric Power Research Institute Co Ltd CEPRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, China Electric Power Research Institute Co Ltd CEPRI filed Critical State Grid Corp of China SGCC
Priority to CN201510876137.8A priority Critical patent/CN106815774A/zh
Priority to PCT/CN2016/090625 priority patent/WO2017092372A1/zh
Publication of CN106815774A publication Critical patent/CN106815774A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06—Energy or water supply

Landscapes

  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Supply And Distribution Of Alternating Current (AREA)
  • Remote Monitoring And Control Of Power-Distribution Networks (AREA)
  • Testing And Monitoring For Control Systems (AREA)

Abstract

本发明提供一种基于CEP引擎的变电站运行监控信号规范化处理方法，所述方法包括如下步骤：(1)读取运行监控信号数据到本地内存；(2)获取规则库数据；(3)配置分区数量，对所述运行监控信号数据按记录数进行平均分区；(4)调用算法库，采用多线程对不同内存区域的运行监控信号数据进行规范化处理；(5)对处理后数据进行归一化输出。本发明基于CEP引擎，采用可插拔的规则库和算法库，保证了处理结果准确性；在CEP核心处理部分，采用多线程技术，大大提升了数据处理效率。

Description

基于CEP引擎的变电站运行监控信号规范化处理方法
技术领域
本发明涉及一种信号规范化处理方法，具体涉及一种基于CEP引擎的变电站运行监控信号规范化处理方法。
背景技术
当前，由于各地电网内变电站采用不同厂家、不同类型的电气设备，各种设备产生的运行监控信号格式、命名方式也种类繁多且数量巨大。这使得目前电网信息化以及能源互联网所要求的信息系统集成化过程中的设备信号处理遇到很大困难，包括信号的分类汇总、统计、信号驱动仿真等实际需求。经调研，目前还未存在一种专门针对电气设备运行监控信号规范化的有效处理方法。
CEP(Complex Event Processing，复杂事件处理)是近年来兴起的一种数据智能流化处理技术，将数据看做一种数据流，基于规则引擎对业务过程中持续产生的各种事件进行复杂的处理，能够实现对连续数据的快速分析处理。目前，事务型数据处理的效率较低，以及传统MQ方式难以处理复杂事务。提出一种效率高，能够处理复杂事物，并且适用于采用规则库和智能学习算法等方式的数据处理方法是目前亟需解决的问题。
发明内容
为了克服上述现有技术的不足，本发明提供一种基于CEP引擎的变电站运行监控信号规范化处理方法，本发明高效而准确地解决了目前各地各变电站内部运行监控信号命名格式不统一的问题。
为了实现上述发明目的，本发明采取如下技术方案：
一种基于CEP引擎的变电站运行监控信号规范化处理方法，所述方法包括如下步骤：
(1)读取运行监控信号数据到本地内存；
(2)获取规则库数据；
(3)配置分区数量，对所述运行监控信号数据按记录数进行平均分区；
(4)调用算法库，采用多线程对不同内存区域的运行监控信号数据进行规范化处理；
(5)对处理后数据进行归一化输出。
优选的，所述步骤(1)中，所述读取运行监控信号为多数据源读取方式，包括实时库、关系库和不同格式文件。
优选的，所述步骤(2)中，所述规则库采用配置文件和XML文件结合的方式。
优选的，所述步骤(4)中包括如下步骤：
步骤4-1、判断当前信号是否到达本块内存结尾，若是，则结束；否则，进行步骤4-2。
步骤4-2：对变电站的保护装置名称和格式进行清洗；
步骤4-3：对所述保护装置的各信号进行清洗；
步骤4-4：输出本条信号清洗后的结果并跳转至下一条信号。
优选的，所述步骤4-2中，对所述保护装置名称和格式进行清洗包括保护装置关键词提取和与装置无关信息的剔除。
优选的，所诉步骤4-3中，对所述保护装置的各信号进行清洗包括信号内关键词剔除、信号内含有的装置名称剔除、信号内关键词的替换和关键词组的模糊匹配。
优选的，所述规则库和所述算法库都采用可插拔方式集成到CEP引擎中对运行监控信号数据进行规范化处理。
与现有技术相比，本发明的有益效果在于：
本发明基于CEP引擎，采用可插拔的规则库和算法库，保证了处理结果准确性；在CEP核心处理部分，采用多线程技术，大大提升了数据处理效率。
本发明高效而准确地解决了目前各地各变电站内部运行监控信号命名格式不统一的问题，为电网监控仿真、变电站仿真、电网设备运行状态实时分析和情景决策、设备实时状态监视和状态估计等后续应用奠定了坚实基础。
附图说明
图1是本发明提供的一种基于CEP引擎的变电站运行监控信号规范化处理方法流程图
图2是本发明提供的对内存区域的运行监控信号数据进行规范化处理的流程图
图3是本发明提供的一种基于CEP引擎的变电站运行监控信号规范化处理系统结构图
具体实施方式
下面结合附图对本发明作进一步详细说明。
本发明应用CEP数据处理引擎，将大规模不规范的变电站内运行监控信号数据流式地输入到处理引擎，调用可插拔式的规则库和算法库对数据进行智能化处理，进而输出规范统一的信号。
如图1所示，一种基于CEP引擎的变电站运行监控信号规范化处理方法，该方法包括如下步骤：
1)读取保护信号数据到本地内存。设置为多数据源读取方式，包括实时库、关系库和不同格式文件。
2)获取规则库数据。规则库采用INI配置文件和XML文件结合的方式。
3)对读入内存的信号数据进行分区。配置分区数量，对内存数据按记录数进行平均分区。
4)调用核心算法，采用多线程对不同区域内存的信号数据进行规范化处理。
5)调用输出模块，对处理后数据进行归一化输出。信号输出源设置为多种，包括数据库和不同格式文件(二进制文件、XML文件、CIME文件等)。
本CEP引擎中，算法库和规则库采用可插拔方式，便于更新维护。
方法的核心处理部分，采用内存分块和多线程处理的方式，提升处理效率。按记录对内存进行分区，每个线程处理一个分区内的若干条记录。
步骤4)中核心算法包括保护装置清洗和保护信号清洗两个部分。保护装置清洗部分包括装置名称中关键词的提取和名称中无关信息的剔除两个步骤；保护信号清洗部分包括关键词的提取与剔除、信号中装置名称的剔除、关键词替换和模糊匹配智能生成词条四个步骤，如图2所示，具体步骤如下：
步骤S1：判断当前信号是否到达本块内存结尾，若是，则结束；否则，进行步骤S2。
步骤S2：对变电站保护装置名称和格式进行清洗，包括保护装置关键词提取和与装置无关信息的剔除。
步骤S3：对保护装置的各信号进行清洗，包括信号内关键词剔除、信号内含有的装置名称剔除、信号内关键词的替换和关键词组的模糊匹配。
步骤S4：输出本条信号清洗后结果并跳转至下一条信号。
如图3所述，为一种基于CEP引擎的变电站运行监控信号规范化处理系统，该系统包括：输入模块、规则库、算法库、CEP引擎模块和输出模块。
所述输入模块用于获取信号数据，包括实时库、关系库和不同格式文件(XML文件)，并将获取的信号数据传入CEP引擎模块。
所述规则库采用INI配置文件和XML文件结合的方式，用于对CEP引擎模块提供清洗规则库。
所述算法库用于对CEP引擎模块提供清洗算法库。
所述CEP引擎模块采用多线程对不同区域内存的信号数据进行规范化处理。
所述输出模块用于对处理后数据进行归一化输出。信号输出源设置为多种，包括数据库和不同格式文件(二进制文件、XML文件、CIME文件等)。
所述规则库和所述算法库与所述CEP引擎模块采用可插拔的方式连接，便于更新维护。
最后应当说明的是：以上实施例仅用以说明本发明的技术方案而非对其限制，尽管参照上述实施例对本发明进行了详细的说明，所属领域的普通技术人员应当理解：依然可以对本发明的具体实施方式进行修改或者等同替换，而未脱离本发明精神和范围的任何修改或者等同替换，其均应涵盖在本发明的权利要求范围当中。

Claims (7)

1.一种基于CEP引擎的变电站运行监控信号规范化处理方法，其特征在于，所述方法包括如下步骤：
(1)读取运行监控信号数据到本地内存；
(2)获取规则库数据；
(3)配置分区数量，对所述运行监控信号数据按记录数进行平均分区；
(4)调用算法库，采用多线程对不同内存区域的运行监控信号数据进行规范化处理；
(5)对处理后数据进行归一化输出。
2.根据权利要求1所述处理方法，其特征在于，所述步骤(1)中，所述读取运行监控信号为多数据源读取方式，包括实时库、关系库和不同格式文件。
3.根据权利要求1所述处理方法，其特征在于，所述步骤(2)中，所述规则库采用配置文件和XML文件结合的方式。
4.根据权利要求1所述处理方法，其特征在于，所述步骤(4)中包括如下步骤：
步骤4-1、判断当前信号是否到达本块内存结尾，若是，则结束；否则，进行步骤4-2；
步骤4-2：对变电站的保护装置名称和格式进行清洗；
步骤4-3：对所述保护装置的各信号进行清洗；
步骤4-4：输出本条信号清洗后的结果并跳转至下一条信号。
5.根据权利要求4所述处理方法，其特征在于，所述步骤4-2中，对所述保护装置名称和格式进行清洗包括保护装置关键词提取和与装置无关信息的剔除。
6.根据权利要求4所述处理方法，其特征在于，所诉步骤4-3中，对所述保护装置的各信号进行清洗包括信号内关键词剔除、信号内含有的装置名称剔除、信号内关键词的替换和关键词组的模糊匹配。
7.根据权利要求1所述处理方法，其特征在于，所述规则库和所述算法库都采用可插拔方式集成到CEP引擎中对运行监控信号数据进行规范化处理。
CN201510876137.8A 2015-12-02 2015-12-02 基于cep引擎的变电站运行监控信号规范化处理方法 Pending CN106815774A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510876137.8A CN106815774A (zh) 2015-12-02 2015-12-02 基于cep引擎的变电站运行监控信号规范化处理方法
PCT/CN2016/090625 WO2017092372A1 (zh) 2015-12-02 2016-07-20 基于cep引擎的变电站运行监控信号规范化处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510876137.8A CN106815774A (zh) 2015-12-02 2015-12-02 基于cep引擎的变电站运行监控信号规范化处理方法

Publications (1)

Publication Number Publication Date
CN106815774A true CN106815774A (zh) 2017-06-09

Family

ID=58796178

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510876137.8A Pending CN106815774A (zh) 2015-12-02 2015-12-02 基于cep引擎的变电站运行监控信号规范化处理方法

Country Status (2)

Country Link
CN (1) CN106815774A (zh)
WO (1) WO2017092372A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110488675A (zh) * 2019-07-12 2019-11-22 国网上海市电力公司 一种基于动态规整算法的变电站声信号特征提取方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110555533B (zh) * 2019-08-27 2022-09-13 国电南瑞科技股份有限公司 一种变电站监控系统一键修改线路名称的方法
CN118626570A (zh) * 2024-08-14 2024-09-10 江苏守正耘创大数据科技有限公司 一种基于变更数据的智能化精准同步数据采集方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103714490A (zh) * 2013-11-28 2014-04-09 国家电网公司 一种大电网在线数据多线程快速整合方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102193555B (zh) * 2011-03-11 2013-04-17 凯里供电局 集控中心全景状态监测系统
CN102790981B (zh) * 2012-06-29 2015-04-22 石化盈科信息技术有限责任公司 传感器网络时空动态模式下的实时报警方法
CN104156412B (zh) * 2014-07-30 2017-10-10 华北电力大学 一种基于复杂事件处理的电能质量扰动事件分类监测方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103714490A (zh) * 2013-11-28 2014-04-09 国家电网公司 一种大电网在线数据多线程快速整合方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
于广军 等著: "《医疗大数据》", 31 January 2015, 上海科学技术出版社 *
何明 等编著: "《互联网+智慧粮食 粮食流通信息化建设白皮书》", 31 October 2015, 东南大学出版社 *
韩会平: ""基于CEP的消防物联网火警误报监测系统研究"", 《中国优秀硕士学位论文全文数据库》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110488675A (zh) * 2019-07-12 2019-11-22 国网上海市电力公司 一种基于动态规整算法的变电站声信号特征提取方法

Also Published As

Publication number Publication date
WO2017092372A1 (zh) 2017-06-08

Similar Documents

Publication Publication Date Title
CN109501834A (zh) 一种道岔转辙机故障预测方法及装置
CN104616205A (zh) 一种基于分布式日志分析的电力系统运行状态监视方法
CN107807860B (zh) 一种基于矩阵分解的电力故障分析方法及系统
CN111444169A (zh) 一种变电站电气设备状态监测与诊断系统及方法
CN109886232A (zh) 一种基于神经网络的电网图像识别系统
CN112711947B (zh) 一种基于文本向量化的故障停电抢修事中处置参考方法
WO2024104406A1 (zh) 异常检测的方法和云网络平台
CN106815774A (zh) 基于cep引擎的变电站运行监控信号规范化处理方法
CN111666978B (zh) 一种it系统运维大数据的智能故障预警系统
CN111506635A (zh) 一种基于自回归和朴素贝叶斯算法的居民用电行为分析的系统及方法
Liu et al. Research on the strategy of locating abnormal data in IOT management platform based on improved modified particle swarm optimization convolutional neural network algorithm
CN112803587A (zh) 一种基于诊断决策库的自动化设备状态智能巡视方法
CN113159517B (zh) 一种三维可视化电网运行数据分析系统
CN113065580A (zh) 一种基于多信息融合的电厂设备管理方法及系统
Pan et al. Study on intelligent anti–electricity stealing early-warning technology based on convolutional neural networks
CN117350447A (zh) 一种适用于电网的多源异构电力数据融合算法
CN116389062A (zh) 基于流量安全分析的工业控制系统行为监测方法及设备
CN103390035A (zh) 一种基于正则表达式的智能告警信号类型匹配方法
Tan et al. Denoising convolutional neural networks based dust accumulation status evaluation of photovoltaic panel
CN112269778B (zh) 一种设备故障诊断方法
CN114282598A (zh) 多源异构电网数据融合方法、装置、设备及计算机介质
CN112036472A (zh) 一种电力系统视觉图像分类方法及系统
Almohammed et al. Data mining and analysis for predicting electrical energy consumption
Li et al. Multi-source heterogeneous log fusion technology of power information system based on big data and imprecise reasoning theory
Yu et al. Heterogeneous IoT and data fusion communication algorithms for power distribution station areas

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170609