CN104917802A - 一种多传感器数据源的处理方法和装置 - Google Patents
一种多传感器数据源的处理方法和装置 Download PDFInfo
- Publication number
- CN104917802A CN104917802A CN201410247290.XA CN201410247290A CN104917802A CN 104917802 A CN104917802 A CN 104917802A CN 201410247290 A CN201410247290 A CN 201410247290A CN 104917802 A CN104917802 A CN 104917802A
- Authority
- CN
- China
- Prior art keywords
- event
- setting
- filtering
- data source
- rule
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Arrangements For Transmission Of Measured Signals (AREA)
Abstract
本发明公开了一种多传感器数据源的处理方法和装置,其中,该方法包括:实时监测并读取各传感器采集的动态数据;将动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;读取简单事件,生成简单事件集,根据设定的事件过滤规则对简单事件集进行过滤;根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。本发明的多传感器数据源的处理方法和装置,能够快速对多数据源进行及时处理。本发明通过生成简单事件,然后生成简单事件集,对简单事件集进行过滤和聚合,最终生成蕴含更多数据信息的复杂事件,能够有效支持实时的业务流程监控、处理性能高、伸缩性强。
Description
技术领域
本发明涉及电力无线传感器网络技术领域,具体地,涉及一种多传感器数据源的处理方法和装置。
背景技术
作为先进的信息获取和处理技术,无线传感器网络技术已经在医疗、工业、农业、商业、公共管理、国防等领域得到了广泛应用,在电力技术领域更是如此,无线传感器网络技术已成为促进未来经济发展,构建和谐社会的重要手段。
智能电网建设是我国在能源领域的重要战略部署,电力无线传感器网络涉及信息获取、传输、存储、处理、应用的全过程,可以为智能电网发、输、变、配、用各个环节重要运行参数的在线监测提供技术支撑,可以全方位提高智能电网各个环节的信息感知深度和广度。无线传感器网络技术的应用将为实现电力系统进一步智能化及电力流、信息流、业务流的融合提供高可靠性技术支撑。但是电力无线传感器网络的应用环境复杂,传感器节点分布点多面广,同时所涉及通信技术多样、通信协议复杂、数据协同处理及共享困难。
在电力无线传感器网络通信过程中,电力能量信息采集系统实现对电量数据的监控、管理、分析以及信息发布,在这样的大型数据库应用系统中,采集的实时数据类型种类繁多,数据总量庞大。由于通信信道和数据量阻塞等原因,会导致部分数据采集缺失。一方面,由于系统的采集服务器、应用服务器和数据库服务器往往部署在不同的地方,相互之间的网络拓扑比较复杂,如果按照一般的流程将采集数据存储到数据库中,一旦网络出现异常或者应用模块之间出现问题而导致数据不能正常存储在数据库中,会造成数据的缺失,影响系统的运行效果和后续流程的正常进行,而系统在网络异常或者软件异常恢复以后对缺失数据进行的补偿性采集和存储降低了系统的运行效率。
在现有的对电力无线传感器网络中多传感器数据源的处理过程中至少存在以下问题:处理效率差,不能快速对多传感器数据源进行及时处理,容易造成网络拥塞导致网络故障等,不能有效处理海量事件或进行大量查询。
发明内容
为了解决现有技术中存在的对多传感器数据源处理效率差的问题,本发明提出了一种多传感器数据源的处理方法和装置。
本发明的多传感器数据源的处理方法包括:
实时监测并读取各传感器采集的动态数据;
将动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;
读取简单事件,生成简单事件集,根据设定的事件过滤规则对简单事件集进行过滤;
根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。
本发明的多传感器数据源的处理方法,能够快速对多数据源进行及时处理。本发明通过生成简单事件,然后生成简单事件集,对简单事件集进行过滤和聚合,最终生成蕴含更多数据信息的复杂事件,能够有效支持实时的业务流程监控、处理性能高、伸缩性强,即使在海量事件、大量查询的情况下仍具有较大的吞吐率。
本发明的多传感器数据源的处理装置包括:
动态数据获取模块,用于实时监测并读取各传感器采集的动态数据;
简单事件生成模块,将动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;
事件集过滤模块,用于读取简单事件,生成简单事件集,根据设定的事件过滤规则对简单事件集进行过滤;
复杂事件生成模块,用于根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。
本发明的多传感器数据源的处理装置,能够快速对多数据源进行及时处理。本发明通过生成简单事件,然后生成简单事件集,对简单事件集进行过滤和聚合,最终生成蕴含更多数据信息的复杂事件,能够有效支持实时的业务流程监控、处理性能高、伸缩性强,即使在海量事件、大量查询的情况下仍具有较大的吞吐率。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明多传感器数据源的处理方法的流程图;
图2为本发明多传感器数据源的处理方法的工作示意图;
图3为本发明实施例的简单事件生成过程的示意图;
图4为本发明实施例的简单事件聚合成复杂事件的示意图;
图5为本发明多传感器数据源的处理装置的结构示意图。
具体实施方式
下面结合附图,对本发明的具体实施方式进行详细描述,但应当理解本发明的保护范围并不受具体实施方式的限制。
为了解决现有技术中存在的对多传感器数据源处理效率差的问题,本发明提出了一种多传感器数据源的处理方法和装置。
本发明的多传感器数据源的处理方法,主要包括简单事件生成和事件过滤与聚合两部分。通过实时监测各传感器的动态数据,当满足简单事件生成规则时,发出启动信号激活事件集过滤模块与复杂事件生成模块,并生成简单事件;事件集过滤模块与复杂事件生成模块收到简单事件生成模块发送的启动信号后,首先生成简单事件集,然后根据事件过滤规则和事件聚合规则对事件进行过滤和聚合,生成蕴含更多信息的复杂事件,并输出结果。本发明中所使用的简单事件生成规则、时间过滤规则、事件聚合规则可根据电力无线传感器网络的实际需求进行设定。
如图1-图2所示,本发明的多传感器数据源的处理方法包括:
步骤S101:读取各传感器采集的动态数据。
步骤S102:将步骤S101中读取的动态数据与设定的简单事件生成规则进行匹配。
步骤S103:当步骤S102中的动态数据与简单事件生成规则匹配成功时,转入步骤S104;否则退出。
步骤S104:发出对多传感器数据源进行事件处理的启动信号,并根据简单事件生成规则生成简单事件;
如图3所示为本发明实施例的简单事件生成过程的示意图,此处以收到的某保护动作信息和开关动作信息抽象成简单事件为例说明。PSAI表示承载事件的是PSAI传感器信息模板;EMS代表动态数据来源为EMS系统传感器;EventGenerate表示在是在数据源处理过程中采用的是EventGenerate事件生成规则;1510100与前面的2009010409结合起来说明事件发生的时间是2009年1月4日9时15分10秒100毫秒;B代表承载事件的传感器所在的地点;CD表示传感器类型。
步骤S105:读取简单事件,生成简单事件集。
步骤S106:根据设定的事件过滤规则对简单事件集进行过滤,判断过滤后的简单事件集是否为空,如果不为空,则转入步骤S107,否则退出。
步骤S107:根据事件聚合规则对不为空的简单事件集进行聚合,聚合成功则转入步骤S108,否则退出。
如图4所示为本发明实施例的简单事件聚合成复杂事件的示意图,即上述步骤S106-S107。
步骤S108:输出聚合成功的复杂事件。
本发明的多传感器数据源的处理方法,能够快速对多数据源进行及时处理。本发明通过生成简单事件,然后生成简单事件集,对简单事件集进行过滤和聚合,最终生成蕴含更多数据信息的复杂事件,能够有效支持实时的业务流程监控、处理性能高、伸缩性强,即使在海量事件、大量查询的情况下仍具有较大的吞吐率。
如图5所示,本发明的多传感器数据源的处理装置包括:
动态数据获取模块10,用于实时监测并读取各传感器采集的动态数据;
简单事件生成模块20,将动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;
事件集过滤模块30,用于读取简单事件,生成简单事件集,根据设定的事件过滤规则对简单事件集进行过滤;
复杂事件生成模块40,用于根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。
在上述技术方案中,事件集过滤模块30具体用于根据设定的事件过滤规则对简单事件集进行过滤,判断过滤后的事件集是否为空。
复杂事件生成模块40具体用于如果过滤后的简单事件集不为空,则根据设定的事件聚合规则对过滤后的事件集进行聚合,生成聚合成功后的复杂事件。
本发明的多传感器数据源的处理装置,能够快速对多数据源进行及时处理。本发明通过生成简单事件,然后生成简单事件集,对简单事件集进行过滤和聚合,最终生成蕴含更多数据信息的复杂事件,能够有效支持实时的业务流程监控、处理性能高、伸缩性强,即使在海量事件、大量查询的情况下仍具有较大的吞吐率。
本发明能有多种不同形式的具体实施方式,上面以图1-图5为例结合附图对本发明的技术方案作举例说明,这并不意味着本发明所应用的具体实例只能局限在特定的流程或实施例结构中,本领域的普通技术人员应当了解,上文所提供的具体实施方案只是多种优选用法中的一些示例,任何体现本发明权利要求的实施方式均应在本发明技术方案所要求保护的范围之内。
最后应说明的是:以上仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (6)
1.一种多传感器数据源的处理方法,其特征在于,包括:
实时监测并读取各传感器采集的动态数据;
将所述动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;
读取所述简单事件,生成简单事件集,根据设定的事件过滤规则对所述简单事件集进行过滤;
根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。
2.根据权利要求1所述的多传感器数据源的处理方法,其特征在于,所述根据设定的事件过滤规则对所述简单事件集进行过滤的步骤具体包括:
根据设定的事件过滤规则对所述简单事件集进行过滤,判断过滤后的事件集是否为空。
3.根据权利要求1所述的多传感器数据源的处理方法,其特征在于,所述根据设定的事件聚合规则对过滤后的事件进行聚合,生成复杂事件的步骤具体包括:
如果所述过滤后的简单事件集不为空,则根据设定的事件聚合规则对所述过滤后的事件集进行聚合,生成聚合成功后的复杂事件。
4.一种多传感器数据源的处理装置,其特征在于,包括:
动态数据获取模块,用于实时监测并读取各传感器采集的动态数据;
简单事件生成模块,将所述动态数据与设定的简单事件生成规则进行匹配,如果匹配成功,则发出启动信号,生成简单事件;
事件集过滤模块,用于读取所述简单事件,生成简单事件集,根据设定的事件过滤规则对所述简单事件集进行过滤;
复杂事件生成模块,用于根据设定的事件聚合规则对过滤后的简单事件集进行聚合,生成复杂事件。
5.根据权利要求4所述的多传感器数据源的处理装置,其特征在于,所述事件集过滤模块具体用于根据设定的事件过滤规则对所述简单事件集进行过滤,判断过滤后的事件集是否为空。
6.根据权利要求4所述的多传感器数据源的处理装置,其特征在于,所述复杂事件生成模块具体用于如果所述过滤后的简单事件集不为空,则根据设定的事件聚合规则对所述过滤后的事件集进行聚合,生成聚合成功后的复杂事件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410247290.XA CN104917802A (zh) | 2014-03-12 | 2014-06-05 | 一种多传感器数据源的处理方法和装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2014100909086 | 2014-03-12 | ||
CN201410090908 | 2014-03-12 | ||
CN201410247290.XA CN104917802A (zh) | 2014-03-12 | 2014-06-05 | 一种多传感器数据源的处理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104917802A true CN104917802A (zh) | 2015-09-16 |
Family
ID=54086502
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410247290.XA Pending CN104917802A (zh) | 2014-03-12 | 2014-06-05 | 一种多传感器数据源的处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104917802A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107515864A (zh) * | 2016-06-15 | 2017-12-26 | 阿里巴巴集团控股有限公司 | 监控工作流的方法及设备 |
CN109361728A (zh) * | 2018-08-30 | 2019-02-19 | 中国科学院上海微系统与信息技术研究所 | 一种基于多源传感数据关联度的分级事件报告系统及方法 |
CN112181477A (zh) * | 2020-09-02 | 2021-01-05 | 广州市双照电子科技有限公司 | 复杂事件处理方法、装置及终端设备 |
CN112446226A (zh) * | 2020-11-18 | 2021-03-05 | 厦门物之联智能科技有限公司 | 一种信号采集处理器及其多数据量读取方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011121310A1 (en) * | 2010-03-31 | 2011-10-06 | British Telecommunications Public Limited Company | Complex event processing system and method |
CN102355482A (zh) * | 2011-07-28 | 2012-02-15 | 山东中创软件工程股份有限公司 | 一种数据传输方法及设备 |
CN102831513A (zh) * | 2012-07-20 | 2012-12-19 | 大连理工大学 | 面向集装箱物流领域的物联网应用层中间件与信息融合集成方法 |
CN103458033A (zh) * | 2013-09-04 | 2013-12-18 | 北京邮电大学 | 事件驱动、面向服务的物联网服务提供系统及其工作方法 |
CN103455611A (zh) * | 2013-09-06 | 2013-12-18 | 北京邮电大学 | Rfid中间件的数据处理方法 |
-
2014
- 2014-06-05 CN CN201410247290.XA patent/CN104917802A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011121310A1 (en) * | 2010-03-31 | 2011-10-06 | British Telecommunications Public Limited Company | Complex event processing system and method |
CN102355482A (zh) * | 2011-07-28 | 2012-02-15 | 山东中创软件工程股份有限公司 | 一种数据传输方法及设备 |
CN102831513A (zh) * | 2012-07-20 | 2012-12-19 | 大连理工大学 | 面向集装箱物流领域的物联网应用层中间件与信息融合集成方法 |
CN103458033A (zh) * | 2013-09-04 | 2013-12-18 | 北京邮电大学 | 事件驱动、面向服务的物联网服务提供系统及其工作方法 |
CN103455611A (zh) * | 2013-09-06 | 2013-12-18 | 北京邮电大学 | Rfid中间件的数据处理方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107515864A (zh) * | 2016-06-15 | 2017-12-26 | 阿里巴巴集团控股有限公司 | 监控工作流的方法及设备 |
CN107515864B (zh) * | 2016-06-15 | 2021-06-22 | 阿里巴巴集团控股有限公司 | 监控工作流的方法及设备 |
CN109361728A (zh) * | 2018-08-30 | 2019-02-19 | 中国科学院上海微系统与信息技术研究所 | 一种基于多源传感数据关联度的分级事件报告系统及方法 |
CN109361728B (zh) * | 2018-08-30 | 2021-01-29 | 中国科学院上海微系统与信息技术研究所 | 一种基于多源传感数据关联度的分级事件报告系统及方法 |
CN112181477A (zh) * | 2020-09-02 | 2021-01-05 | 广州市双照电子科技有限公司 | 复杂事件处理方法、装置及终端设备 |
CN112181477B (zh) * | 2020-09-02 | 2024-05-10 | 广州市双照电子科技有限公司 | 复杂事件处理方法、装置及终端设备 |
CN112446226A (zh) * | 2020-11-18 | 2021-03-05 | 厦门物之联智能科技有限公司 | 一种信号采集处理器及其多数据量读取方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104917802A (zh) | 一种多传感器数据源的处理方法和装置 | |
CN105790990B (zh) | 一种监管配用电通信业务的方法及其系统 | |
CN106878466B (zh) | 一种水电机组数据管理和设备控制一体化平台 | |
CN109788003A (zh) | 一种基于mqtt协议的智能公厕设备交互方法及系统 | |
CN103390882B (zh) | 一种海上电网保护定值修改方法 | |
CN113589096A (zh) | 一种多状态量可组态变电设备边缘计算系统及其方法 | |
CN108769169B (zh) | 电力系统测控装置的远程故障诊断方法 | |
CN107590029A (zh) | 用于水电站的计算机监控系统数据备份及恢复系统方法 | |
CN111143167A (zh) | 用于多平台的告警归并方法及装置、设备、存储介质 | |
CN108848128A (zh) | 一种通过物联网平台远程控制智能3d打印机设备的系统 | |
CN106155894A (zh) | 一种测试用例的生成方法及装置 | |
CN105322660A (zh) | 配电通讯设备的远程控制方法和装置 | |
CN106570775A (zh) | 电网故障预案联合编制方法及装置 | |
CN101511095A (zh) | 基站告警智能监控系统 | |
CN104573987B (zh) | 一种实现pcs与电网多源业务系统互操作集成方法 | |
CN104317868A (zh) | 一种基于单前置多scada应用的调控一体化方法 | |
CN105376091A (zh) | 一种服务器下线系统及方法 | |
CN103632225B (zh) | 电力调度通信事件过滤系统及方法 | |
CN106953809A (zh) | 一种基于485分时通信的设备资源采集方法 | |
CN103414595B (zh) | 电力调度数据网链路监测系统拓扑图生成方法 | |
CN105574065A (zh) | 一种对实时数据漏点率统计的方法 | |
CN103607051A (zh) | 一种变电站扩建方法及系统 | |
CN210927674U (zh) | 一种基于标准通信协议的工业互联网体系架构 | |
CN106878103A (zh) | 一种mms报文遥测数据提取方法 | |
CN102508998B (zh) | 基于iec61850标准的信息订阅发布系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150916 |