CN111917877A - 物联网设备的数据处理方法及装置、电子设备、存储介质 - Google Patents
物联网设备的数据处理方法及装置、电子设备、存储介质 Download PDFInfo
- Publication number
- CN111917877A CN111917877A CN202010765624.8A CN202010765624A CN111917877A CN 111917877 A CN111917877 A CN 111917877A CN 202010765624 A CN202010765624 A CN 202010765624A CN 111917877 A CN111917877 A CN 111917877A
- Authority
- CN
- China
- Prior art keywords
- alarm
- rule
- analysis
- internet
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 22
- 238000004458 analytical method Methods 0.000 claims abstract description 134
- 238000012544 monitoring process Methods 0.000 claims abstract description 73
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000000034 method Methods 0.000 claims abstract description 26
- 230000004927 fusion Effects 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 10
- 238000004422 calculation algorithm Methods 0.000 claims description 8
- 230000008030 elimination Effects 0.000 claims description 8
- 238000003379 elimination reaction Methods 0.000 claims description 8
- 238000004806 packaging method and process Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 6
- 230000006855 networking Effects 0.000 claims 1
- 239000000779 smoke Substances 0.000 description 24
- 238000004140 cleaning Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 9
- 239000007789 gas Substances 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 5
- 238000005538 encapsulation Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 239000004576 sand Substances 0.000 description 2
- 230000001629 suppression Effects 0.000 description 2
- 230000009897 systematic effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000010219 correlation analysis Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000002737 fuel gas Substances 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/46—Interconnection of networks
- H04L12/4633—Interconnection of networks using encapsulation techniques, e.g. tunneling
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Alarm Systems (AREA)
Abstract
本申请提供一种物联网设备的数据处理方法及装置、电子设备、存储介质，该方法包括：取对指定类型物联网设备的分析任务，分析任务包括告警规则、执行时间、区域范围以及频度；按照频度，定时在执行时间获取区域范围内指定类型物联网设备的监测数据；根据告警规则，判断监测数据是否满足告警规则；若满足，产生告警信号。本请提供的技术方案，与类型对应的分析任务，从而可以将同种类型的物联网设备的监测数据统一按照分析任务设定的告警规则进行是否告警的判断，从而对于类型多样、数据格式不一的物联网设备的监测数据，具有各自对应的分析手段，提高数据处理效率，提高数据处理设备的性能。
Description
技术领域
本申请涉及物联网技术领域，特别涉及一种物联网设备的数据处理方法及装置、电子设备、计算机可读存储介质。
背景技术
现有的数据清洗分为系统性数据清洗、缺失值清洗、格式内容清洗、逻辑错误清洗、非需求数据清洗等。图1是一种常规的数据清洗过程。
系统性数据清洗主要依赖几种规则，包括非空检核、主键重复、非法代码清洗、非法值清洗、数据格式检核、记录数检核等基于IT能力的方式方法。对于缺失值清洗，首先确定缺失值范围，按照缺失比例和字段重要性，分别制定策略。对于格式内容清洗，显示格式不一致(如时间、日期、数值、全半角等)，通过采用将其处理成一致的某种格式；对于逻辑错误清洗，主要采用去重、去除不合理值、修正矛盾内容方式。对于非需求数据清洗，则把不要的字段删除即可。
上述数据清洗方式主要解决的是通用性的、系统性的数据缺陷，对于各种物联网设备的数据，这些数据具有相应的业务性、行业性，都需要特殊处理，并不在通用数据清洗技术涵盖范围内，目前缺少针对性的方案，无法实现对物联网设备的数据处理。
发明内容
本申请实施例提供了物联网设备的数据处理方法，可以对不同类型设备的数据进行分析处理。
本申请实施例提供了一种物联网设备的数据处理方法，包括：
获取对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度；
按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据；
根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号。
在一实施例中，所述告警规则包括多条进行与/或连接的分析规则；根据所述告警规则，判断所述监测数据是否满足所述告警规则，包括：
针对每条分析规则，对所述监测数据按照所述分析规则进行判断，得到所述分析规则对应的执行结果；
将每条分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到最终判断结果。
在一实施例中，所述告警规则包括多个进行与/或连接的组，每个组包括多条进行与/或连接的分析规则，所述将每条分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到最终判断结果，包括：
针对每个组，将同组内分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到组判断结果；
将不同组的组判断结果按照不同组之间定义的与/或关系进行融合判断，得到最终判断结果。
在一实施例中，所述监测数据包括报警事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，判断预设时间段内是否接收到一次或多次报警事件；若接收到一次或多次报警事件，均产生一次告警信号。
在一实施例中，所述监测数据包括报警事件和报警清除事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，若判断出接收到报警事件后预设时间段内未接收到报警清除事件，产生告警信号。
在一实施例中，所述监测数据包括报警事件和报警消除事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，若判断出预设时间段内多次成对出现报警事件与报警消除事件的组合，产生告警信号。
在一实施例中，所述根据所述告警规则，判断所述监测数据是否满足所述告警规则，包括：
根据所述指定类型物联网设备对应配置的关联设备，根据所述指定类型物联网设备的监测数据以及关联设备的监测数据，判断是否满足所述告警规则。
在一实施例中，所述监测数据包括参数检测数据，所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，判断所述参数检测数据是否超出所述告警规则设定的数值范围；若超出，则产生告警信号。
在一实施例中，在所述接收对指定类型物联网设备的分析任务之前，所述方法还包括：
接收对指定类型物联网设备的数据处理请求；
根据从规则库选取的分析规则以及自定义的分析规则，按照配置的封装算法，将选取的分析规则以及自定义的分析规则封装成告警规则；
将所述告警规则以及配置的执行时间、区域范围以及频度，打包成对所述指定类型物联网设备的分析任务。
本申请实施例还提供了一种物联网设备的数据处理装置，包括：
任务接收模块，用于接收对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度；
数据获取模块，用于按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据；
数据处理模块，用于根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警。
本申请实施例还提供了一种电子设备，所述电子设备包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行上述物联网设备的数据处理方法。
本申请实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序可由处理器执行以完成上述物联网设备的数据处理方法。
本请上述实施例提供的技术方案，按照物联网设备的类型进行归类，具有与类型对应的分析任务，从而可以将同种类型的物联网设备的监测数据统一按照分析任务设定的告警规则进行是否告警的判断，从而对于类型多样、数据格式不一的物联网设备的监测数据，具有各自对应的分析手段，提高数据处理效率，提高数据处理设备的性能。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单地介绍。
图1为背景技术中提供的数据清洗过程；
图2为本申请实施例提供的物联网设备的数据处理方法的应用场景示意图；
图3是本申请实施例提供的电子设备的结构示意图；
图4是本申请实施例提供的物联网设备的数据处理方法的流程示意图；
图5是图4对应实施例中步骤S330的细节流程图；
图6是图5对应实施例中步骤S332的细节流程图；
图7是图4对应实施例基础上本申请另一实施例提供的物联网设备的数据处理方法的流程示意图；
图8是本申请实施例提供的物联网设备的数据处理装置的框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述。
相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本申请的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
图2为本申请实施例提供的物联网设备的数据处理方法的应用场景示意图。如图2所示，该应用场景包括：物联网设备110、服务端120以及客户端130，服务端120与物联网设备110、客户端130之间通过有线或无线网络连接。物联网设备110可以包括水质传感器、井盖、燃气监测传感器、无线门磁、人体感应装置等等。服务端120可以是服务器、服务器集群、云计算中心。客户端130可以是手机、平板电脑或台式电脑。客户端130可以向服务端120发送分析任务，服务端120可以采用本申请实施例提供的方法，采集物联网设备的数据执行分析任务。
图3是本申请实施例提供的电子设备的结构示意图。所述电子设备200包括：处理器201；用于存储处理器201可执行指令的存储器202；所述处理器201被配置为执行本申请实施例提供的物联网设备的数据处理方法。
存储器202可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(Static Random Access Memory，简称SRAM)，电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，简称EEPROM)，可擦除可编程只读存储器(Erasable Programmable Read Only Memory，简称EPROM)，可编程只读存储器(Programmable Red-Only Memory，简称PROM)，只读存储器(Read-Only Memory，简称ROM)，磁存储器，快闪存储器，磁盘或光盘。存储器中还存储有多个模块，分别借由该处理器执行，以完成下述物联网设备的数据处理方法步骤。
本申请实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序可由处理器执行以完成本申请实施例提供的物联网设备的数据处理方法。
图4是本申请实施例提供的一种物联网设备的数据处理方法的流程示意图。如图4所示，所述方法包括以下步骤S310-S330。
步骤S310：获取对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度。
物联网设备是指与服务端网络连接，向服务端上报数据的设备。物联网设备可以是防火门开关、烟感设备、水质传感器、井盖、燃气监测传感器、无线门磁、人体感应装置等等。指定类型可以上述列举的其中一种物联网设备，例如烟感设备。由于同样是烟感设备，但是不同型号的烟感设备的数据也不同，故指定类型也可以进一步限定物联网设备的型号。
分析任务可以提前存储在服务端，也可以由客户端发送到服务端。分析任务可以包括设备类型范围(即指定类型物联网设备，例如烟感设备、智能井盖设备)，还可以上述提到的告警规则、执行时间、区域范围以及频度。其中，告警规则是指产生告警信号的触发条件，例如井盖倾斜角大于30°；执行时间是指分析任务的执行时间，可以细分到小时，例如12点、6点；区域范围是指数据的采集范围，可以是某个街道、某个居委、某个小区或某个单元。频度用于表征分析任务执行次数的多少，可以是每天一次、每小时一次或每周一次。
步骤S320：按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据。
举例来说，假设频度是每天一次，执行时间是12点，区域范围是xx街道，指定类型物联网设备是智能井盖设备，则服务端可以每天12点获取xx街道智能井盖设备的监测数据。监测数据可以包括传感器采集到的数据(下文称为参数检测数据)，例如浊度、酸碱度、电池电压；监测数据还可以包括报警特征数据，例如报警上报事件、报警取消事件，例如烟感设备在检测到烟雾和温度过高时会触发报警上报事件。在烟雾或温度恢复正常时触发报警取消事件。
步骤S330：根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号。
其中，不同类型物联网设备的监测数据不同，告警规则也不同。比如地磁类设备，告警规则是按照报警发生到消除的历时(精确到分钟)，即时间维度作为规则的主要考量依据；比如井盖设备，告警规则是按照探测到的倾角变化幅度来进行判断的。由于监测数据可以分为参数检测数据和报警特征数据，而报警特征数据又可以分为报警上报事件和报警取消事件。故告警规则也可以针对参数检测数据设定业务数据规则，针对报警特征数据设定报警处理规则。如下表1所示，列举了几种物联网设备的业务数据处理规则和报警处理规则。
表1-物联网设备的业务数据规则和报警处理规则的举例
以烟感设备举例来说，告警规则可以是温度大于43度同时烟雾浓度大于0.06％，如果烟感设备的监测数据指示温度50度同时烟雾浓度0.08％，则可以认为监测数据满足告警规则可以产生告警信号。服务端可以将告警信号发送到客户端进行提醒。
在一实施例中，告警规则还可以包括报警处理规则，举例来说，报警处理规则可以是“接收到传感器的报警上报事件，10s内未接收到报警清除事件，则进行告警处理”。假设服务端接收到烟感设备的报警上报事件，而在之后的10s内未接收到报警清除事件，可以认为满足告警规则，产生告警信号。其中，服务端可以对告警规则进行解析和映射，变成可识别的对象、变成可执行的程序，之后按照告警规则的指示进行告警判断。
其中，告警规则并非设定后长期固化不变，通过规则验证表达式可以构建数据沙盘，用于常态化、高仿真的告警规则优化测试。即通过一段周期的真实历史原始告警数据，结合经过优化的告警规则，输出预测的误告警处理结果，以评判告警规则优化的成效与可行性。
本申请上述实施例提供的技术方案，按照物联网设备的类型进行归类，具有与类型对应的分析任务，从而可以将同种类型的物联网设备的监测数据统一按照分析任务设定的告警规则进行是否告警的判断，从而对于类型多样、数据格式不一的物联网设备的监测数据，具有各自对应的分析手段，提高数据处理效率，提高数据处理设备的性能。
在上述实施例的基础上，所述告警规则包括多条进行与/或连接的分析规则；如图5所示，上述步骤S330包括：步骤S331和步骤S332。
步骤S331：针对每条分析规则，对所述监测数据按照所述分析规则进行判断，得到所述分析规则对应的执行结果。
其中，告警规则可以包括多条分析规则，例如温度大于43度可以认为是一条分析规则、烟雾浓度大于0.06％可以认为是另一条分析规则、电池电压低于3.35V也是一条分析规则。多条分析规则进行“与”连接是指多条分析规则的条件均满足才触发告警信号，多条分析规则进行“或”连接是指其中一条分析规则的条件满足就触发告警信号。从而可以将多条分析规则按照判断需求，进行与/或连接。以火灾报警器举例来说，只有在温度和烟雾浓度同时达到设定值时才会告警，因此告警规则可以包括两条“与”连接的分析规则，即温度大于第一设定值且烟雾浓度大于第二设定值。
步骤S332：将每条分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到最终判断结果。
对于分析规则数量较多的告警规则，其中的与/或关系可能也比较复杂。为简化计算，服务端可以一一针对每条分析规则，判断监测数据是否满足每条分析规则，从而得到每条分析规则对应的执行结果。分析规则对应的执行结果用于指示监测数据是否满足此分析规则。融合判断是指根据告警规则中定义的多条分析规则之间的与/或关系，可以判断每条分析规则的执行结果是否符合上述与/或关系。最终判断结果是指是否满足告警规则的判断结果。如果满足，则产生告警信号。
举例来说，告警规则包括两条“与”连接的分析规则，温度大于43度，烟雾浓度大于0.06％，假设从监测数据中可以判断出满足第一条分析规则“温度大于43条”，也满足第二条分析规则“烟雾浓度大于0.06％”，即符合“与”的关系，因此认为满足告警规则，产生告警信号。
举例来说，假设告警规则包括两条“或”连接的分析规则，温度大于43度“或”烟雾浓度大于0.06％，假设从监测数据中可以判断出满足第一条分析规则“温度大于43度”，不满足第二条分析规则“烟雾浓度大于0.06％”，但是由于告警条件中分析规则是“或”关系，即其中一条分析规则符合就认为满足告警规则，因此由于监测数据满足分析规则“温度大于43度”，符合告警规则，产生告警信号。
在上述实施例的基础上，述告警规则包括多个进行与/或连接的组，每个组包括多条进行与/或连接的分析规则，如图6所示，上述步骤S332可以包括以下步骤S3321-步骤S3322。
步骤S3321：针对每个组，将同组内分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到组判断结果。
其中，若干条分析规则可以形成一个组，组内的若干条分析规则可以存在与/或的关系，然后与其他组或分析规则再存在与/或的关系。
假设存在两个组，则可以分别针对每个组，一一判断监测数据是否满足该组内每条分析规则，得到每条分析规则的执行结果。之后根据该组内每条分析规则之间的与/或关系，判断每条分析规则的执行结果是否符合上述上述与/或关系，得到组判断结果。组判断结果用于指示经过组内分析规则判断得到的是否告警的判断结果。
在一实施例中，假设满足一条分析规则记为1，不满足记为0，满足告警规则记为1，不满足告警规则记为0。因此，可以按照组内分析规则之间的与/或关系进行运算，假设得到结果是1，表示组判断结果是满足告警规则，相反，如果得到结果是0，表示组判断结果是不满足告警规则。
步骤S3322：将不同组的组判断结果按照不同组之间定义的与/或关系进行融合判断，得到最终判断结果。
举例来说，假设告警规则中存在两个组件，组和组之间是“与”关系，第一个组的组判断结果是1，第二个组的组判断结果是0，则进行“与”运算后，得到最终判断结果为0，表示不满足告警规则。
假设告警规则中存在两个组件，组和组之间是“或”关系，第一个组的组判断结果是1，第二个组的组判断结果是0，则进行“或”运算后，得到最终判断结果为1，表示满足告警规则。
上述实施例，可以将复杂的分析规则，通过简单的逻辑运算得到最终判断结果，提高数据处理效率。
在一实施例中，上述监测数据可以是报警事件；上述步骤S330可以包括：根据所述告警规则，判断预设时间段内是否接收到一次或多次报警事件；若接收到一次或多次报警事件，均产生一次告警信号。
为避免反复向客户端发出告警信号，增加数据处理设备的负载，告警规则可以定义预设时间段内接收到的报警事件，则产生一次告警信号，从而减少告警信号产生的次数，提高数据处理设备的性能。
举例来说，预设时间段可以是1小时，假设1小时内重复接收到报警事件，则可以在第一次接收到告警事件时，产生一次告警信号，之后1小时内不再重复产生告警信号。第2小时开始，如果仍接收到重复的报警事件，则重新产生一次告警信号。由此，可以减少告警信号的推送次数。
在一实施例中，在一定的时间窗内发生的大量重复报警事件，根据告警规则中设定的报警频次门限对报警事件的上传进行压制，并支持物联设备型号、故障/报警类型、故障级别、故障/报警原因和发生次数等条件的设置。当且仅当满足条件的故障/报警的发生次数超出/低于/等于设置的门限值时才将故障/报警的告警信号进行上传。
在一实施例中，上述所述监测数据可以包括报警事件和报警清除事件；上述步骤S330可以包括：
根据所述告警规则，若判断出接收到报警事件后预设时间段内未接收到报警清除事件，产生告警信号。
不同类型的物联网设备的告警规则不同，举例来说，对于燃气监测传感器，如果服务端接收到燃气监测传感器的报警事件，但是10s内仍未接收到燃气监测传感器上报的报警消除事件，则服务端向客户端推送告警信号。
在一实施例中，服务端可以动态给每个上报监测数据的物联网设备分配一个缓冲队列，将接收到的监测数据按照接收时间逐一压入，同时侦听每个事件的状态，相同状态只压入不触发配对，只有缓冲队列中同时出现报警与取消事件，才记录到实时告警队列中，并置入缓冲队列中的事件数量，同时清空缓冲队列。
在一实施例中，上述监测数据包括报警事件和报警消除事件；上述步骤S330可以包括：根据所述告警规则，若判断出预设时间段内多次成对出现报警事件与报警消除事件的组合，产生告警信号。
上述实施例是“瞬告”的告警规则，此告警规则的判定依据是“故障+恢复”成对出现以及预设时间段内次数达到一定数量。例如一天内出现3次报警事件和报警消除事件成对出现，则可以产生告警信号。
告警规则可以定义对此类事件的延时抑制处理机制，通过设置设备型号、故障级别、故障类别、瞬告的历时时间等参数，实现瞬告的压制操作。当服务端接收到此类报警事件时，先不进行上传，当超出其历史门限时再将该告警信号上传至故障实时监控中。瞬告开关机制和判断条件，可以由管理人员灵活配置其是否执行时间压制和是否上传。
在一实施例中，所述监测数据包括参数检测数据，上述步骤S330可以包括：根据所述告警规则，判断所述参数检测数据是否超出所述告警规则设定的数值范围；若超出，则产生告警信号。
其中，参数检测数据是指传感器采集的参数值，例如温度、湿度、浓度、电压、水质酸碱度、浊度等参数值。告警规则中可以定义标准的数值范围，在参数检测数据不在此数值范围内时，产生告警信号。
在一实施例中，上述步骤S330还可以包括：根据所述指定类型物联网设备对应配置的关联设备，根据所述指定类型物联网设备的监测数据以及关联设备的监测数据，判断是否满足所述告警规则。
通过对特定场景下的物联网设备，根据一定的设备关系，可以构建“关联设备”。比如同一单元楼的烟感设备可以汇聚为一组关联设备，一个大型消防通道上布设的多个地磁设备也可以汇聚为一组关联设备。
在上述判定之前，可以通过时间、区域等自然维度，将物联网设备进行有序关联，并研究完成关联关系的物联网设备的故障及报警的产生、清除的时序，推导出多源数据的关联因子判别，进而实现多源故障或者报警的根因分析。
对于同时上报的多个物联网设备的故障或者报警事件，进行关联分析，如同时或者顺序接收到燃气报警和烟感报警，则平台自动判别是因为燃气泄漏而导致的业务报警，结合“业务误报警动态识别规则”，剔除因操作导致的误报(如多次点燃燃气)，精准定位出真实报警。在实际应用中，服务端可以根据关联设备的监测数据以及物联网设备的监测数据，综合判断得到具体的故障原因，从而产生告警信号。
在一实施例中，可构建关联遍历矩阵，回溯每条故障/报警的关联识别过程，当满足一条关联规则时，不结束识别过程，继续遍历所有关联规则，归纳出该报警满足关联的所有规则集合。基于关联遍历矩阵，进入准确率炼化分析模式，在周期内故障/报警沙盘中提供人工审核方式，确定“精确”的关联规则覆盖面，与矩阵分析结果进行比对、分拣、确认，输出关联体系结果集的准确率。
在一实施例中，在上述步骤S310之前，如图7所示，本申请实施例提供的方法还包括以下步骤S301-步骤S303。
步骤S301：接收对指定类型物联网设备的数据处理请求。
其中，数据处理请求可以由客户端发送到服务端，数据处理请求可以包含数据清洗目标。数据清洗目标可以是某个设备类型或某个设备型号。
步骤S302：根据从规则库选取的分析规则以及自定义的分析规则，按照配置的封装算法，将选取的分析规则以及自定义的分析规则封装成告警规则。
其中，规则库中包含大量分析规则，自定义的分析规则是指规则库中没有的分析规则。不同的分析规则可以设定规则名称和规则类型，以便分类管理。
自定义分析规则的方法如下：定义分析规则的名称，例如规则1；选择规则对象，可以是系统中存在的任何对象，如烟感设备、无线地磁设备等。设定对象的算法表达式，包括“>”“>＝”“<”“<＝”“＝”“不等于”“包含”“不包含”等，可以针对分析对象的属性字段和关联字段进行设定；设定分析参数，例如3、10、20等。在定义了验证表达式和分析参数后，单条规则就完成了。自定义规则保存后，还可以添加到规则库中。
封装算法可以是“与”“或”的关系，还可以进行分“组”，服务端可以按照配置的“组”、“与”、“或”封装算法，建立分析规则之间的关系，形成告警规则。
步骤S303：将所述告警规则以及配置的执行时间、区域范围以及频度，打包在成对所述指定类型物联网设备的分析任务。
在构建告警规则后，还可以进行任务设定，设定规则执行时间，可以细分到小时；设定规则执行的频度，可以是小时、天、周等；设定规则执行的区域范围，即可以是某个街镇、某个居委、某个小区、某个单元等。可以是设备类型范围，即可以是烟感设备，也可以是智能井盖设备等。上述告警规则、执行时间、区域范围、频度、设备类型等信息构成指定类型物联网设备的分析任务。
之后，可以按照分析任务设定的时间、频度自动进行数据处理。根据需要，还可以选择不同维度、不同形式的输出报告，例如excel、word、pdf。
本申请上述实施例提供的技术方案，采用分层架构，数据库访问层(存储监测数据)、分析规则库层(存储分析规则)、任务调度层(调度分析任务)、任务引擎(处理分析任务)，实现了物联网设备的数据自定义处理。通过对对象(物联网设备)的属性、关联和参数值，抽象出算法表达式、验证表达式、规则封装算法，实现基于规则的物联数据清洗。通过规则封装，结合设定的业务应用，通过任务驱动实现物联数据清洗。
下述为本申请装置实施例，可以用于执行本申请上述物联网设备的数据处理方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请物联网设备的数据处理方法实施例。
图8是本申请实施例提供了一种物联网设备的数据处理装置的框图，如图8所示，该装置包括：任务接收模块810、数据获取模块820以及数据处理模块830。
任务接收模块810，用于接收对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度。
数据获取模块820，用于按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据。
数据处理模块830，用于根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警。
上述装置中各个模块的功能和作用的实现过程具体详见上述物联网设备的数据处理方法中对应步骤的实现过程，在此不再赘述。
在本申请所提供的几个实施例中，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (12)
1.一种物联网设备的数据处理方法，其特征在于，包括：
获取对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度；
按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据；
根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号。
2.根据权利要求1所述的方法，其特征在于，所述告警规则包括多条进行与/或连接的分析规则；根据所述告警规则，判断所述监测数据是否满足所述告警规则，包括：
针对每条分析规则，对所述监测数据按照所述分析规则进行判断，得到所述分析规则对应的执行结果；
将每条分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到最终判断结果。
3.根据权利要求2所述的方法，其特征在于，所述告警规则包括多个进行与/或连接的组，每个组包括多条进行与/或连接的分析规则，所述将每条分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到最终判断结果，包括：
针对每个组，将同组内分析规则对应的执行结果按照不同分析规则之间定义的与/或关系进行融合判断，得到组判断结果；
将不同组的组判断结果按照不同组之间定义的与/或关系进行融合判断，得到最终判断结果。
4.根据权利要求1所述的方法，其特征在于，所述监测数据包括报警事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，判断预设时间段内是否接收到一次或多次报警事件；若接收到一次或多次报警事件，均产生一次告警信号。
5.根据权利要求1所述的方法，其特征在于，所述监测数据包括报警事件和报警清除事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，若判断出接收到报警事件后预设时间段内未接收到报警清除事件，产生告警信号。
6.根据权利要求1所述的方法，其特征在于，所述监测数据包括报警事件和报警消除事件；所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，若判断出预设时间段内多次成对出现报警事件与报警消除事件的组合，产生告警信号。
7.根据权利要求1所述的方法，其特征在于，所述根据所述告警规则，判断所述监测数据是否满足所述告警规则，包括：
根据所述指定类型物联网设备对应配置的关联设备，根据所述指定类型物联网设备的监测数据以及关联设备的监测数据，判断是否满足所述告警规则。
8.根据权利要求1所述的方法，其特征在于，所述监测数据包括参数检测数据，所述根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警信号，包括：
根据所述告警规则，判断所述参数检测数据是否超出所述告警规则设定的数值范围；若超出，则产生告警信号。
9.根据权利要求1所述的方法，其特征在于，在所述获取对指定类型物联网设备的分析任务之前，所述方法还包括：
接收对指定类型物联网设备的数据处理请求；
根据从规则库选取的分析规则以及自定义的分析规则，按照配置的封装算法，将选取的分析规则以及自定义的分析规则封装成告警规则；
将所述告警规则以及配置的执行时间、区域范围以及频度，打包成对所述指定类型物联网设备的分析任务。
10.一种物联网设备的数据处理装置，其特征在于，包括：
任务接收模块，用于接收对指定类型物联网设备的分析任务，所述分析任务包括告警规则、执行时间、区域范围以及频度；
数据获取模块，用于按照所述频度，定时在所述执行时间获取所述区域范围内所述指定类型物联网设备的监测数据；
数据处理模块，用于根据所述告警规则，判断所述监测数据是否满足所述告警规则；若满足，产生告警。
11.一种电子设备，其特征在于，所述电子设备包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行权利要求1-9任意一项所述的物联网设备的数据处理方法。
12.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序可由处理器执行以完成权利要求1-9任意一项所述的物联网设备的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010765624.8A CN111917877A (zh) | 2020-08-03 | 2020-08-03 | 物联网设备的数据处理方法及装置、电子设备、存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010765624.8A CN111917877A (zh) | 2020-08-03 | 2020-08-03 | 物联网设备的数据处理方法及装置、电子设备、存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111917877A true CN111917877A (zh) | 2020-11-10 |
Family
ID=73286936
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010765624.8A Pending CN111917877A (zh) | 2020-08-03 | 2020-08-03 | 物联网设备的数据处理方法及装置、电子设备、存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111917877A (zh) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112802313A (zh) * | 2020-12-31 | 2021-05-14 | 新奥数能科技有限公司 | 一种设备的报警方法及装置 |
| CN112820066A (zh) * | 2020-12-31 | 2021-05-18 | 博锐尚格科技股份有限公司 | 基于对象的报警处理方法、装置、设备及存储介质 |
| CN113055442A (zh) * | 2021-02-20 | 2021-06-29 | 深圳中正信息科技有限公司 | 基于动态因子的事件生成方法、电子设备及存储介质 |
| CN113449059A (zh) * | 2021-06-29 | 2021-09-28 | 软通智慧信息技术有限公司 | 事件的处理方法、装置、设备和存储介质 |
| CN113485206A (zh) * | 2021-08-06 | 2021-10-08 | 时代云英(重庆)科技有限公司 | 一种可扩展的物联网系统及方法 |
| CN113808376A (zh) * | 2021-09-18 | 2021-12-17 | 中国工商银行股份有限公司 | 自助柜员机设备安全监控方法及装置 |
| CN113923103A (zh) * | 2021-12-06 | 2022-01-11 | 深圳市城市交通规划设计研究中心股份有限公司 | 一种告警方法、装置、云服务平台和可读存储介质 |
| CN115190000A (zh) * | 2022-06-02 | 2022-10-14 | 河北秦淮数据有限公司 | 告警数据的处理方法、装置、电子设备和存储介质 |
| CN115292063A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现累计物联设备的方法、系统及装置 |
| CN115297166A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种流架构的规则引擎架构、系统及方法 |
| CN115292064A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现物联设备顺序确认的方法、系统及装置 |
| CN115292062A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现产品顺序确认的方法、系统及装置 |
| CN115292065A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构的事件确认方法、系统及装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101217400A (zh) * | 2007-12-29 | 2008-07-09 | 北京亿阳信通软件研究院有限公司 | 一种综合智能巡检方法和系统 |
| CN103079219A (zh) * | 2011-10-26 | 2013-05-01 | 艾默生网络能源有限公司 | 基站自动巡检数字管理系统和方法 |
| US20130297249A1 (en) * | 2012-05-04 | 2013-11-07 | Edward D. Thompson | System and method for detecting electric power plant equipment overheating with real-time plural parallel detection and analysis parameters |
| CN104486445A (zh) * | 2014-12-30 | 2015-04-01 | 北京天云融创软件技术有限公司 | 一种基于云平台的分布式可扩展资源监控系统及方法 |
| CN110645048A (zh) * | 2019-09-24 | 2020-01-03 | 国电南瑞南京控制系统有限公司 | 一种智慧矿山多系统在线联动方法 |
-
2020
- 2020-08-03 CN CN202010765624.8A patent/CN111917877A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101217400A (zh) * | 2007-12-29 | 2008-07-09 | 北京亿阳信通软件研究院有限公司 | 一种综合智能巡检方法和系统 |
| CN103079219A (zh) * | 2011-10-26 | 2013-05-01 | 艾默生网络能源有限公司 | 基站自动巡检数字管理系统和方法 |
| US20130297249A1 (en) * | 2012-05-04 | 2013-11-07 | Edward D. Thompson | System and method for detecting electric power plant equipment overheating with real-time plural parallel detection and analysis parameters |
| CN104486445A (zh) * | 2014-12-30 | 2015-04-01 | 北京天云融创软件技术有限公司 | 一种基于云平台的分布式可扩展资源监控系统及方法 |
| CN110645048A (zh) * | 2019-09-24 | 2020-01-03 | 国电南瑞南京控制系统有限公司 | 一种智慧矿山多系统在线联动方法 |
Non-Patent Citations (1)
| Title |
|---|
| 康锐: "《可靠性数据分析》" * |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112802313B (zh) * | 2020-12-31 | 2022-11-04 | 新奥数能科技有限公司 | 一种设备的报警方法及装置 |
| CN112820066A (zh) * | 2020-12-31 | 2021-05-18 | 博锐尚格科技股份有限公司 | 基于对象的报警处理方法、装置、设备及存储介质 |
| CN112802313A (zh) * | 2020-12-31 | 2021-05-14 | 新奥数能科技有限公司 | 一种设备的报警方法及装置 |
| CN113055442A (zh) * | 2021-02-20 | 2021-06-29 | 深圳中正信息科技有限公司 | 基于动态因子的事件生成方法、电子设备及存储介质 |
| CN113449059A (zh) * | 2021-06-29 | 2021-09-28 | 软通智慧信息技术有限公司 | 事件的处理方法、装置、设备和存储介质 |
| CN113485206A (zh) * | 2021-08-06 | 2021-10-08 | 时代云英(重庆)科技有限公司 | 一种可扩展的物联网系统及方法 |
| CN113808376A (zh) * | 2021-09-18 | 2021-12-17 | 中国工商银行股份有限公司 | 自助柜员机设备安全监控方法及装置 |
| CN113808376B (zh) * | 2021-09-18 | 2023-06-16 | 中国工商银行股份有限公司 | 自助柜员机设备安全监控方法及装置 |
| CN113923103A (zh) * | 2021-12-06 | 2022-01-11 | 深圳市城市交通规划设计研究中心股份有限公司 | 一种告警方法、装置、云服务平台和可读存储介质 |
| CN115190000A (zh) * | 2022-06-02 | 2022-10-14 | 河北秦淮数据有限公司 | 告警数据的处理方法、装置、电子设备和存储介质 |
| CN115190000B (zh) * | 2022-06-02 | 2024-03-15 | 河北秦淮数据有限公司 | 告警数据的处理方法、装置、电子设备和存储介质 |
| CN115292063A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现累计物联设备的方法、系统及装置 |
| CN115292062A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现产品顺序确认的方法、系统及装置 |
| CN115292065A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构的事件确认方法、系统及装置 |
| CN115292065B (zh) * | 2022-07-29 | 2023-05-26 | 成都智元汇信息技术股份有限公司 | 一种基于流架构的事件确认方法、系统及装置 |
| CN115292064A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种基于流架构实现物联设备顺序确认的方法、系统及装置 |
| CN115297166A (zh) * | 2022-07-29 | 2022-11-04 | 成都智元汇信息技术股份有限公司 | 一种流架构的规则引擎架构、系统及方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111917877A (zh) | 物联网设备的数据处理方法及装置、电子设备、存储介质 | |
| US20220223023A1 (en) | Building risk analysis system with dynamic modification of asset-threat weights | |
| US11360959B2 (en) | Building risk analysis system with dynamic and base line risk | |
| KR101825023B1 (ko) | 리스크 조기 경보 방법 및 장치 | |
| CN112684133B (zh) | 基于大数据平台的水质监测预警方法、系统及存储介质 | |
| US11906112B2 (en) | Methods for safety management of compressors in smart gas pipeline network and internet of things systems thereof | |
| CN110866642A (zh) | 安全监控方法、装置、电子设备和计算机可读存储介质 | |
| US20100085182A1 (en) | Method for processing alarm data to generate security reports | |
| CN103856339A (zh) | 一种对告警信息进行压缩的方法和设备 | |
| CN111915122A (zh) | 一种数据监测方法、装置、设备和存储介质 | |
| CN111275951A (zh) | 一种信息处理方法、装置、设备及计算机存储介质 | |
| CN108306997B (zh) | 域名解析监控方法及装置 | |
| CN107465652B (zh) | 一种操作行为检测方法、服务器及系统 | |
| CN114882688A (zh) | 一种基于边缘计算的酒吧安全监测系统 | |
| CN110928305A (zh) | 用于铁路客运车站巡更机器人的巡更方法及系统 | |
| KR20160062259A (ko) | 차량 이상 상태를 관리하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록매체 | |
| CN110399537B (zh) | 一种基于人工智能技术的警情时空预测方法 | |
| CN111555917A (zh) | 基于云平台的告警信息处理方法及装置 | |
| CN109218062B (zh) | 基于置信区间的互联网业务报警方法和装置 | |
| CN116402190A (zh) | 一种铁路沿线滑坡地质灾害识别方法及系统 | |
| CN113793134B (zh) | 一种车辆报警方法、装置和计算机可读存储介质 | |
| CN114936113B (zh) | 一种任务雪崩恢复方法、装置、电子设备及存储介质 | |
| CN114839317B (zh) | 大气网格化综合预警方法及其系统 | |
| CN116594835A (zh) | 应用健康监控方法及装置、存储介质、计算机设备 | |
| CN117076850A (zh) | 一种物联数据清洗方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201110 |