CN115495320A - 一种基于大数据的通信机房防护的监测管理系统 - Google Patents

一种基于大数据的通信机房防护的监测管理系统 Download PDF

Info

Publication number
CN115495320A
CN115495320A CN202211429943.7A CN202211429943A CN115495320A CN 115495320 A CN115495320 A CN 115495320A CN 202211429943 A CN202211429943 A CN 202211429943A CN 115495320 A CN115495320 A CN 115495320A
Authority
CN
China
Prior art keywords
data
degree
prediction
error
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211429943.7A
Other languages
English (en)
Other versions
CN115495320B (zh
Inventor
寻广岩
周志远
赵立勋
郑福慧
田常立
岳阳
田艳艳
王忠贵
颜明
许崇芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhilian Xintong Technology Co ltd
Original Assignee
Zhilian Xintong Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhilian Xintong Technology Co ltd filed Critical Zhilian Xintong Technology Co ltd
Priority to CN202211429943.7A priority Critical patent/CN115495320B/zh
Publication of CN115495320A publication Critical patent/CN115495320A/zh
Application granted granted Critical
Publication of CN115495320B publication Critical patent/CN115495320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3089Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/049Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及数据处理技术领域,具体涉及一种基于大数据的通信机房防护的监测管理系统;该系统包括:数据采集模块、预测数据获取模块、误差程度获取模块、预测数据确定模块以及分析预警模块,数据采集模块用于采集所有低功耗传感器的数据,并获取数据对应的异常度进行唤醒调控;预测数据获取模块用于通过训练完成的神经网络输出预测数据;误差程度获取模块用于将预测数据划分为第一数据和第二数据,并获取其中各位置数据的误差程度;预测数据确定模块用于根据连续预测的预测数据中各位置的置信度,根据置信度得到未来预测数据;分析预警模块用于对未来预测数据进行传输数据调整并进行分析预警,提高传输效率且保证了监测结果的准确性。

Description

一种基于大数据的通信机房防护的监测管理系统
技术领域
本发明涉及数据处理技术领域,具体涉及一种基于大数据的通信机房防护的监测管理系统。
背景技术
通信机房站点的分布点较多且面积广泛,经常需要注意的安全防护问题包括:防火、防盗、防水等;若采用传统的人工巡检维护模式,无法有效保证设备维护工作质量和时效性;若要实现少人或者无人值守,则需要安装各类相关的传感器,通过传感器采集数据,从而检测、识别异常,并对异常进行警示。
通过传感器监测通信机房的状态是目前最常用的一种方法,通过云计算的方式来处理云端收到的通信机房的数据,但是由于通信机房的数量较多,每个通信机房配备的传感器也较多,所以每时每刻会有大量的数据流需要传输至云端服务器,这对于传输带宽能力和服务器的数据处理能力的要求很高,成本较大,并且大量正常状态的数据也被传输处理,会造成资源的浪费和不必要的冗余;在对所有的数据进行分析时,采用传统的预测方式来预测数据并判断异常时,往往默认为预测数据是可信的,缺乏对预测数据的置信程度的判定,因此预测数据的准确度难以保证,数据不够可靠。
发明内容
为了解决上述防护监测的预测数据准确度小且传输效率低的技术问题,本发明的目的在于提供一种基于大数据的通信机房防护的监测管理系统,所采用的技术方案具体如下:
本发明一个实施例提供了一种基于大数据的通信机房防护的监测管理系统,该系统包括以下模块:
数据采集模块,用于采集所有低功耗传感器的数据,获取每个数据的异常度,基于所述异常度进行唤醒调控;
预测数据获取模块,用于采集唤醒调控后每个传感器对应的时序数据,将所述时序数据输入训练完成的神经网络输出预测数据;
误差程度获取模块,用于将所述预测数据划分为第一数据和第二数据,获取所述第一数据中每个位置数据的误差程度,并基于所述第一数据得到神经网络中的固有误差程度,根据所述固有误差程度获取所述第二数据中每个位置数据的误差程度;
预测数据确定模块,用于根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度;根据连续预测得到的预测数据以及每个位置的所述置信度得到未来预测数据;
分析预警模块,用于获取未来预测数据中每个位置数据的预测异常度,基于所述预测异常度与所述置信度调整传输数据,由云端服务器对接收的所述传输数据进行分析预警。
优选的,所述误差程度获取模块中将所述预测数据划分为第一数据和第二数据的步骤,包括:
所述预测数据中存在实际采集值的位置数据为第一数据,所述预测数据中不存在实际采集值的位置数据为第二数据。
优选的,所述误差程度获取模块中获取所述第一数据中每个位置数据的误差程度的步骤,包括:
获取所述第一数据中每个位置数据对应的实际采集值与所述位置数据的预测数据值之间的差值,所述差值的平方为所述位置数据的误差程度。
优选的,所述误差程度获取模块中基于所述第一数据得到神经网络中的固有误差程度的步骤,包括:
所述神经网络包括至少两个解码器,每个所述解码器对应一个损失函数;
获取所述第一数据中所有位置数据对应的误差程度的平均值,所述平均值与每个所述解码器的损失函数值的求和的均值为神经网络中对应所述解码器的固有误差程度。
优选的,所述误差程度获取模块中根据所述固有误差程度获取所述第二数据中每个位置数据的误差程度的步骤,包括:
每个所述解码器对应一组预测数据,所述预测数据中包括第二数据;获取当前时刻数据的至少两个延时数据;
对于任意一个解码器对应预测数据中的第二数据:若所述第二数据中存在延时数据,以所述延时数据对应的实际采集值与预测数据值之间的差值的平方,作为所述延时数据所对应的位置数据的误差程度;获取所述预测数据中第二数据的数量,计算所述数量与对应所述解码器的固有误差程度的乘积作为总误差程度,计算所述第二数据中所有延时数据的误差程度的和作为累计误差程度,将所述总误差程度与所述累计误差程度的差值记为累加误差程度;获取所述第二数据中除了延时数据之外其他位置数据的总数量,所述累加误差程度与所述总数量的比值为所述第二数据中除了延时数据之外其他各位置数据的误差程度;
若所述第二数据中不存在延时数据,计算当前所述解码器的固有误差程度与其他每个所述解码器的固有误差程度之间的比值,获取其他每个所述解码器的优化误差程度;其中,所述优化误差程度与对应所述解码器的固有误差程度呈正相关关系;计算每个所述比值及其对应所述解码器的优化误差程度的乘积结果,所有乘积结果的平均值为当前所述解码器的第二数据中各位置数据的误差程度。
优选的,所述预测数据确定模块中根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度的步骤,包括:
获取每次预测得到的预测数据中每个位置对应的位置数据的误差程度;计算连续预测的预测数据中各位置的误差程度的平均值作为对应位置的位置误差程度;
获取所有预测下每个位置的位置误差程度的求和结果;设定误差超限系数,将所述误差超限系数与当前解码器对应的损失函数值的乘积作为单位误差;
计算所述求和结果与所述单位误差的第一比值,根据所述第一比值得到对应位置的置信度,所述置信度与所述第一比值呈负相关关系。
优选的,所述预测数据确定模块中根据连续预测得到的预测数据以及每个位置的所述置信度得到未来预测数据的步骤,包括:
连续预测得到的预测数据中存在不同位置对应相同时刻的数据,选取置信度最大时的位置作为该数据的位置,以得到未来预测数据。
优选的,所述数据采集模块中获取每个数据的异常度,基于所述异常度进行唤醒调控的步骤,包括:
设定唤醒阈值并获取数据的类型,数据的类型包括数据越小越正常和数据越大越正常;
对于数据越小越正常的类型的数据,计算此类型数据的最大异常值与所述唤醒阈值的差值作为分母,以当前数据与所述唤醒阈值的差值作为分子,所述分子和分母的比值为当前数据的异常度;
对于数据越大越正常的类型的数据,计算所述唤醒阈值与此类型数据的最小异常值的差值作为分母,以所述唤醒阈值和当前数据的差值作为分子,所述分子和分母的比值为当前数据的异常度;
构建每个低功耗传感器对应的高功耗设备集合,基于低功耗传感器的当前数据的异常度与预设基础阈值的求和作为唤醒比例,所述唤醒比例与低功耗传感器对应的高功耗设备集合中所有高功耗传感器的数量的乘积为唤醒数量;
根据所述唤醒数量在对应的高功耗设备集合中进行设备唤醒。
优选的,所述基于所述预测异常度与所述置信度调整传输数据的步骤,包括:
选取未来预测数据中的预测异常度的最大值和置信度的最大值;根据预测异常度的最大值和置信度的最大值分别与预设的异常阈值和置信度阈值比较:
当预测异常度的最大值小于异常阈值,但置信度的最大值大于置信度阈值时,仅传输低功耗传感器采集的数据;
当预测异常度的最大值小于异常阈值,但置信度的最大值不大于置信度阈值时,传输部分高功耗传感器采集的数据和全部的低功耗传感器采集的数据;
当预测异常度的最大值不小于异常阈值,且置信度的最大值不大于置信度阈值时,传输部分高功耗传感器采集的数据和全部的低功耗传感器采集的数据;
当预测异常度的最大值不小于异常阈值,但置信度的最大值大于置信度阈值时,传输全部的高功耗传感器和全部的低功耗传感器采集的数据。
优选的,所述由云端服务器对接收的所述传输数据进行分析预警的步骤,包括:
所述云端服务器采用不同的机器学习算法得到对应传输数据是否存在异常,若存在异常,将存在异常的数据传输至对应的终端,由所述终端进行预警。
本发明具有如下有益效果:本发明实施例中通过数据采集模块首先采集低功耗传感器的数据,基于低功耗传感器的数据的异常度进行唤醒调控,避免了大量高功耗传感器一同工作的能量消耗,降低了成本;然后根据预测数据获取模块得到唤醒调控后的每个传感器的时序数据,并基于神经网络进行预测数据的获取;进而基于误差程度获取模块对获取的预测数据进行分析,将预测数据划分为第一数据和第二数据分别进行误差程度的计算,并结合第一数据得到神经网络中的固有误差程度,通过固有误差程度获取第二数据中各位置数据的误差程度,适应性更强且各个位置数据的误差程度的结果更加准确;由预测数据确定模块结合不同位置数据的误差程度得到每个位置的置信度,基于置信度在连续预测的预测数据中得到未来预测数据,确保了未来预测数据的可靠程度;进一步的,分析预警模块用于根据未来预测数据中每个位置的置信度和预测异常度进行传输数据的调整,避免了全部数据传输时的低效率问题,减少了数据传输中的冗余,提高了传输速度;并且未来预测数据的可靠程度较高,从而决定了传输数据的可靠程度较高,基于可靠程度更高的传输数据进行分析预警,得到的预警结果更加及时且准确。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1为本发明一个实施例所提供的一种基于大数据的通信机房防护的监测管理系统框图;
图2为本发明一个实施例所提供的一组时序数据在多次预测后每个解码器对应的预测数据;
图3为本发明一个实施例所提供的一种时序数据连续预测的示意图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种基于大数据的通信机房防护的监测管理系统,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构、或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
本申请主要适用于对通信机房的防护监测,下面结合附图具体的说明本发明所提供的一种基于大数据的通信机房防护的监测管理系统的具体方案。
请参阅图1,其示出了本发明一个实施例提供的一种基于大数据的通信机房防护的监测管理系统框图,该系统包括以下模块:
数据采集模块10,用于采集所有低功耗传感器的数据,获取每个数据的异常度,基于异常度进行唤醒调控。
目前对通信机房的防护监测大多是基于传感器采集数据,并将采集数据直接传输到云端服务器,然后由云端服务器进行异常数据的分析处理,而将采集数据直接进行传输这一方式存在多个弊端,其一是大量采集数据的传输对传输带宽的要求较大,采集数据中包括所有的正常数据和异常数据,但大量正常数据的传输并非必须的,因此效率较低;其二是通过多种类别的传感器进行不间断的数据采集的成本较高,传感器中存在低功耗传感器和高功耗传感器,且部分传感器之间采集数据可能雷同,因此会导致成本较大;其三就是在对传输数据进行预测分析时,忽略了预测结果的可靠性,通常默认为预测结果是可靠的,但大量的预测结果都会存在不同程度的偏差,因此通过可靠度不高的预测数据进行分析,导致最终结果的可靠性也较低。基于以上三个弊端,本发明实施例的目的在于降低通信机房防护监测中的成本、并提高监测效率以及监测结果的可靠性。
通信机房中常见的事故包括电气事故、火灾事故、爆炸事故、设备损坏事故以及通信阻断事故,对应设置的传感器装置通常包括:门磁报警、温度报警、湿度报警、停电报警、空调被盗报警、剪线报警、红外报警以及烟感等;不同的传感器对应的功耗不同,而很多传感器装置是重复检测的,例如检测通信机房的温度,有低功耗的温度传感器以及高功耗的热成像仪;为了降低通信机房防护监测的成本,本发明实施例中初始设置低功耗采集状态,也即是只通过低功耗的采集设备进行数据的采集,对于功耗高且检测准确的设备可以先保持在休眠状态,以避免资源的浪费,仅通过低功耗设备的运行进行数据的采集进行初步的判断。
需要说明的是,无论是低功耗设备还是高功耗设备,都需要与对应的数据网关进行有线或者无线的连接,具体连接方式由实施者根据不同的实施场景进行设定,例如有线连接的方式有RS458,无线连接的方式包括蓝牙等,以便于对采集的数据进行传输。
对于低功耗设备得到的数据进行唤醒阈值的判定,唤醒阈值的作用是用于初步的提前判定,当低功耗设备采集的当前数据与唤醒阈值比较后判定可能存在异常,则需要进行唤醒,通过调控唤醒高功耗设备进行更加准确和全面的监测,唤醒阈值的设置由实施者根据设备对应的功能以及实际的异常情况进行设定;例如一般电缆在发生异常时的表面温度为60°,则可相应将温度相关的唤醒阈值设置为45°,当实际测量的温度大于该唤醒阈值45°时,提前预判当前环境疑似异常,则唤醒其他高功耗设备进行监测。
实际参与工作的低功耗设备,根据其实际的工作情况所对应唤醒的高功耗设备集合不同,也即是每个低功耗设备都对应一个可唤醒的高功耗设备集合,不同高功耗设备集合之间存在交集,当根据唤醒阈值判断此时数据存在疑似异常时,根据数据的异常度对高功耗设备集合中的高功耗设备进行调控唤醒;考虑到不同类型的低功耗设备其采集的数据类型不同,因此每个数据的异常度与唤醒阈值比较的规则也不同,则对不同情况下每个数据的异常度进行获取,异常度的获取方法具体为:
(1)对于正常情况下的数据小于唤醒阈值的情况,也即是数据越小越正常的情况,计算此类型数据的最大异常值与唤醒阈值的差值作为分母,以当前数据与唤醒阈值的差值作为分子,分子和分母的比值为当前数据的异常度;异常度的计算为:
Figure 924117DEST_PATH_IMAGE001
其中,
Figure 901169DEST_PATH_IMAGE002
表示异常度;
Figure 62023DEST_PATH_IMAGE003
表示当前采集的数据;
Figure 533456DEST_PATH_IMAGE004
表示唤醒阈值,实施者根据实际情况设定;
Figure 40529DEST_PATH_IMAGE005
表示此类数据监测的最大异常值。
(2)对于正常情况下的数据大于唤醒阈值的情况,也即是数据越大越正常的情况,计算唤醒阈值与此类型数据的最小异常值的差值作为分母,以唤醒阈值和当前数据的差值作为分子,分子和分母的比值为当前数据的异常度;异常度的计算为:
Figure 876898DEST_PATH_IMAGE006
其中,
Figure 587365DEST_PATH_IMAGE002
表示异常度;
Figure 111756DEST_PATH_IMAGE003
表示当前采集的数据;
Figure 958490DEST_PATH_IMAGE004
表示唤醒阈值,实施者根据实际情况设定;
Figure 28077DEST_PATH_IMAGE007
表示此类数据监测的最小异常值。
对于两种情况中的
Figure 412791DEST_PATH_IMAGE008
或者
Figure 226026DEST_PATH_IMAGE009
均是为了对异常度进行归一化处理,使得异常度的取值可以保持在
Figure 192845DEST_PATH_IMAGE010
范围内;而
Figure 433333DEST_PATH_IMAGE011
Figure 367660DEST_PATH_IMAGE012
则是用于计算当前数据与唤醒阈值之间的差异,当差异越小,说明此时数据与唤醒阈值的相差较小,因此数据对应的异常度也越小。
因此当前数据的异常度进行唤醒数量的获取,通过唤醒数量决定对应高功耗设备集合的激活设备数量;对于需要被唤醒的任意一个高功耗设备集合而言,根据当前数据的异常度获取该高功耗设备集合中的唤醒数量为:
Figure 922269DEST_PATH_IMAGE013
其中,
Figure 743595DEST_PATH_IMAGE014
表示唤醒数量;
Figure 404252DEST_PATH_IMAGE015
表示当前需要被唤醒的高功耗设备集合中所有设备的数量;
Figure 311028DEST_PATH_IMAGE002
表示当前数据的异常度,数据的异常度越大,需要唤醒的高功耗设备越多,对应的唤醒数量越大;
Figure 466066DEST_PATH_IMAGE016
表示基础阈值,由实施者自行调整,本发明实施例中设置经验值为0.4,也即是当数据的异常度
Figure 594428DEST_PATH_IMAGE002
取值不小于0.6时,需要唤醒高功耗设备集合中所有的高功耗设备,也即是需要激活高功耗设备集合中所有的高功耗设备。
需要说明的是,当获取的唤醒数量小于高功耗设备集合中设备的数量时,实施者可根据功耗的大小或者是数据监测准确性的大小进行设备唤醒的调控,例如将对应高功耗设备集合中所有设备的功耗由小到大排列,并根据唤醒数量依次唤醒;同理,实施者也可以将高功耗设备集合中所有设备的数据采集准确度进行由大到小的排列,并根据唤醒数量进行依次唤醒。
由此可根据初始低功耗设备采集的数据进行初步判断分析,进而根据实际情况判断是否需要唤醒高功耗设备,以达到唤醒调控的目的,同时还尽可能降低了分析过程中的能耗,减少成本。
预测数据获取模块20,用于采集唤醒调控后每个传感器对应的时序数据,将时序数据输入训练完成的神经网络输出预测数据。
在数据采集模块10中根据每个低功耗设备采集的数据的异常度进行高功耗设备的唤醒,在唤醒了不同的高功耗设备后,高功耗设备会采集到新的数据,将所有的低功耗设备采集的数据以及高功耗设备采集的数据进行分析;每个传感器设备采集的数据均为时序上的数据,因此对每个传感器设备对应的时序数据进行预测分析,以便于提前发现异常情况进行预警。本发明实施例中数据预测的方法采用神经网络进行,神经网络的使用方便,在获取到对应网络的结构后,根据大量的数据训练神经网络以使得神经网络的损失函数收敛,通过完成训练后的神经网络进行预测数据的获取。
本发明实施例中预测的神经网络采用TCN时间卷积神经网络,网络的结构为编码器-解码器,以预设长度的数据为输入,通过TCN时间卷积神经网络中卷积与池化操作进行编码,然后对于编码数据采用不同的解码器进行解码,分别输出不同时序关系的预设长度的输出数据,也即是TCN时间卷积神经网络的输入数据与输出数据的长度一致,通过当前的时序数据可以预测得到后续的多个时刻下的预测数据;TCN时间卷积神经网络的训练过程为:输入时序数据上预设长度C个数据,也即是在时序数据的排列上的前C个数据,以对应的第C个数据之后的数据为不同解码器的输出监督数据,例如第一个解码器输出第C个数据的延后一个时刻的数据,第二个解码器输出第C个数据的延后三个时刻的数据,具体解码器的数量以及对应延后时刻的数据由实施者根据不同实际情况设置,在实际运行中进行调整;通过不断的训练TCN时间卷积神经网络直至损失函数平稳收敛且趋近于0,表明网络训练完成,可以根据训练完成的神经网络进行预测数据的获取。
需要说明的是,由于不同解码器的收敛程度不同,则导致不同解码器输出的预测数据的准确程度不同,而决定解码器的收敛程度的是对应的损失函数,因此后续对TCN时间卷积神经网络中的损失函数进行调整优化,以提高预测的每个解码器输出的预测数据的准确性,单个解码器对应的损失函数为:
Figure 176719DEST_PATH_IMAGE017
其中,
Figure 570791DEST_PATH_IMAGE018
表示单个解码器的损失函数;
Figure 529520DEST_PATH_IMAGE019
表示当前解码器输出的预测数据包括的数据数量;
Figure 574705DEST_PATH_IMAGE020
表示TCN时间卷积神经网络输出的预测数据中第
Figure 327898DEST_PATH_IMAGE021
个数据;
Figure 943687DEST_PATH_IMAGE022
表示第
Figure 904776DEST_PATH_IMAGE021
个数据的标签数据;
Figure 555200DEST_PATH_IMAGE023
表示预测数据与标签数据的差值,差值越小对应的TCN时间卷积神经网络的准确度越高,损失函数越收敛。
由于TCN时间卷积神经网络包括多个解码器,则根据每个解码器对应的损失函数可得到整个TCN时间卷积神经网络的综合损失函数,该综合损失函数具体为:
Figure 479294DEST_PATH_IMAGE024
其中,
Figure 847958DEST_PATH_IMAGE025
表示综合损失函数;
Figure 397757DEST_PATH_IMAGE026
表示第
Figure 105950DEST_PATH_IMAGE027
个解码器的损失函数;
Figure 200945DEST_PATH_IMAGE028
表示TCN时间卷积神经网络中所有解码器的数量;
Figure 306173DEST_PATH_IMAGE029
表示TCN时间卷积神经网络中所有解码器对应的损失函数的平均,也即是TCN时间卷积神经网络的综合损失函数,用于对TCN时间卷积神经网络的训练。
误差程度获取模块30,用于将预测数据划分为第一数据和第二数据,获取第一数据中每个位置数据的误差程度,并基于第一数据得到神经网络中的固有误差程度,根据固有误差程度获取第二数据中每个位置数据的误差程度。
根据预测数据获取模块20中训练完成的TCN时间卷积神经网络得到对应的预测数据,由于不同的解码器输出的预测数据不一致,且输入的时序数据也存在多个数据组合输入,因此得到的每个预测数据的误差程度不同;输入的时序数据是以固定长度的窗口的滑动进行数据的选取,固定长度的窗口也即是预设长度C,通过固定长度的窗口滑动进行时序数据的逐个选择,并输入训练完成的TCN时间卷积神经网络中,以得到对应的预测数据;例如对于时序数据0,1,2,3,4,5,6,7,8而言,假设预设长度C为5,则通过逐个选择输入TCN时间卷积神经网络的数据分别为:0,1,2,3,4;1,2,3,4,5;2,3,4,5,6;…;4,5,6,7,8;以第5时刻的数据为例,在通过TCN时间卷积神经网络进行预测获取预测数据时,可基于第1时刻的数据预测出第5时刻的数据,同时也可以基于第2时刻的数据预测出第5时刻的数据,因此对于第5时刻的数据而言,可以通过多个已知时刻的数据进行预测,且不同数据预测出的预测数据的取值可能存在差异。对预测数据获取模块20中得到的预测数据中的各位置数据进行误差程度的获取,获取预测数据中每个位置数据的误差程度的方法具体如下:
首先,对预测数据中所有位置数据进行分类,本发明实施例中将每个解码器输出的预测数据分为两个类别分别为第一数据和第二数据;第一数据是指真实采集得到的数据的预测数据,第二数据是指没有真实采集得到的数据的预测数据;作为一个示例,假设存在时序数据为:0,1,2,3,4,5,6,7,8,根据该时序数据得到的预测数据为0,1,2,3,4,5,6,7,8,9,10,11,12,13;则对于该组预测数据而言,第6个时刻的位置数据5是真实采集的时序数据中存在的数据,因此预测数据中第6个时刻下对应的位置数据为第一数据;而对于预测数据中第12个时刻的位置数据11,由于时序数据对应的当前时刻是第9时刻,因此第12个时刻的位置数据并不对应真实采集的数据,则第12个时刻下对应的位置数据为第二数据。
然后,对第一数据以及第二数据中每个位置数据的误差程度进行分析,对于第一数据而言,由于每个位置数据均对应有真实采集的数据,因此直接利用真实采集数据与预测出的数据的差值反映该位置数据的误差程度,即第一数据中每个位置数据的误差程度的计算为:
Figure 348078DEST_PATH_IMAGE030
其中,
Figure 973095DEST_PATH_IMAGE031
表示第一数据中任意位置数据的误差程度;
Figure 753838DEST_PATH_IMAGE032
表示第一数据中该位置数据对应的实际采集值;
Figure 831515DEST_PATH_IMAGE033
表示第一数据中该位置数据的预测数据值;
Figure 411532DEST_PATH_IMAGE034
的取值越大,表明实际值与预测值之间的差异越大,则对应的误差程度越大。
对于第二数据而言,通过该预测数据中第一数据对当前解码器的误差程度进行调整,得到当前解码器对应的固有误差程度,根据解码器的固有误差程度对第二数据中每个位置数据的误差程度进行获取,固有误差程度是基于解码器的损失函数以及第一数据中每个位置数据的误差程度得到,固有误差程度的具体计算为:
Figure 140323DEST_PATH_IMAGE035
其中,
Figure 842700DEST_PATH_IMAGE036
表示固有误差程度;
Figure 407673DEST_PATH_IMAGE018
表示当前解码器收敛时的损失函数值,损失函数值越小,说明解码器输出的预测数据越准确;
Figure 588119DEST_PATH_IMAGE037
表示第一数据中所有位置数据的数量;
Figure 640257DEST_PATH_IMAGE038
表示第一数据中第
Figure 247956DEST_PATH_IMAGE039
个位置数据对应的实际采集值;
Figure 300226DEST_PATH_IMAGE040
表示第一数据中第
Figure 533630DEST_PATH_IMAGE039
个位置数据的预测数据值;
Figure 987745DEST_PATH_IMAGE041
表示第一数据中第
Figure 969607DEST_PATH_IMAGE039
个位置数据的误差程度;
Figure 492862DEST_PATH_IMAGE042
表示第一数据中所有位置数据的误差程度的均值,该值越大,说明第一数据中所有位置数据的预测误差越大,则解码器对应的固有误差程度越大。
通过解码器对应的损失函数值与预测数据中第一数据的误差程度的均值相加求平均得到解码器的固有误差程度,对每个解码器的损失函数进行了调整优化;进一步根据解码器的固有误差程度获取对应的预测数据包括的第二数据中每个位置数据的误差程度,每个解码器对应一组预测数据,预测数据中包括第二数据;获取当前时刻数据的至少两个延时数据,对于任意一个解码器对应预测数据中的第二数据:若第二数据中存在延时数据,以延时数据对应的实际采集值与预测数据值之间的差值的平方,作为延时数据所对应的位置数据的误差程度;获取预测数据中第二数据的数量,计算数量与对应解码器的固有误差程度的乘积作为总误差程度,计算第二数据中所有延时数据的误差程度的和作为累计误差程度,将总误差程度与累计误差程度的差值记为累加误差程度;获取第二数据中除了延时数据之外其他位置数据的总数量,累加误差程度与总数量的比值为第二数据中除了延时数据之外其他各位置数据的误差程度;若第二数据中不存在延时数据,计算当前解码器的固有误差程度与其他每个解码器的固有误差程度之间的比值,获取其他每个解码器的优化误差程度;其中,优化误差程度与对应解码器的固有误差程度呈正相关关系;计算每个比值及其对应解码器的优化误差程度的乘积结果,所有乘积结果的平均值为当前解码器的第二数据中各位置数据的误差程度。
具体的,第二数据中每个位置数据的误差程度的获取方法具体如下:
首先,在获取到预测数据的第二数据后,通过延时采集多个时刻的数据用于对第二数据的验证和误差程度调整,本发明实施例中延时数据的时刻为2,例如对时序数据在第8个时刻后进行预测,则实时采集第9个时刻和第10个时刻的数据,且第9个时刻和第10个时刻的位置数据记为延时数据;基于延时数据的情况对不同第二数据的误差程度进行获取。
对于同一个解码器而言,解码器的误差程度是采用统一的平均误差进行表示的,若是当前解码器内的预测数据内的第二数据中存在延时数据的预测数据,则以延时数据的预测数据与延时数据的实际采集值之间的差值得到对应位置数据的误差程度,即误差程度的计算为:
Figure 15110DEST_PATH_IMAGE043
其中,
Figure 323731DEST_PATH_IMAGE044
表示第二数据中延时数据对应位置数据的误差程度;
Figure 538812DEST_PATH_IMAGE045
表示延时数据对应位置数据的实际采集值;
Figure 814941DEST_PATH_IMAGE033
表示延时数据对应位置数据的预测数据值。
对于当前解码器的预测数据内的第二数据中包括除了延时数据之外的其他位置数据,此类位置数据的误差程度的计算为:
Figure 78564DEST_PATH_IMAGE046
其中,
Figure 772850DEST_PATH_IMAGE047
表示第二数据中除延时数据之外的其他位置数据的误差程度;
Figure 142521DEST_PATH_IMAGE048
表示当前解码器中第二数据的数量;
Figure 594362DEST_PATH_IMAGE036
表示当前解码器的固有误差程度;
Figure 458412DEST_PATH_IMAGE049
表示第二数据中第
Figure 256473DEST_PATH_IMAGE050
个延时数据对应位置数据的误差程度;
Figure 751039DEST_PATH_IMAGE051
表示第二数据中延时数据的数量;
Figure 752493DEST_PATH_IMAGE052
表示第二数据中除了延时数据之外其他位置数据的总数量;
Figure 669503DEST_PATH_IMAGE053
表示第二数据中所有延时数据的累计误差程度;
Figure 276065DEST_PATH_IMAGE054
表示以解码器的固有误差程度与第二数据的数量的乘积得到的总误差程度,与第二数据中所有延时数据的累计误差程度之间的差值,该差值反映了第二数据中除了延时数据之外其他位置数据的累加误差程度;
Figure 738270DEST_PATH_IMAGE055
表示第二数据中除了延时数据之外其他位置数据的累加误差程度与第二数据中除了延时数据之外其他位置数据的总数量的比值,也即是平均的误差程度,用于表示第二数据中除了延时数据之外其他位置数据对应的误差程度。
若当前解码器中不存在延时数据,则第二数据中每个位置数据的误差程度通过解码器之间的相对误差进行获取,此时第二数据中每个位置数据的误差程度的计算为:
Figure 413971DEST_PATH_IMAGE056
其中,
Figure 885403DEST_PATH_IMAGE057
表示当前解码器不存在延时数据时第二数据中每个位置数据的误差程度;
Figure 143209DEST_PATH_IMAGE036
表示当前解码器的固有误差程度;
Figure 25584DEST_PATH_IMAGE058
表示第
Figure 939313DEST_PATH_IMAGE027
个解码器的固有误差程度;
Figure 948857DEST_PATH_IMAGE028
表示所有解码器的数量;
Figure 310437DEST_PATH_IMAGE059
表示第
Figure 380025DEST_PATH_IMAGE027
个解码器在结合延时数据后的优化误差程度;
Figure 515471DEST_PATH_IMAGE060
的取值反映了当前解码器与第
Figure 577974DEST_PATH_IMAGE027
个解码器之间固有误差程度的相对误差;
Figure 544793DEST_PATH_IMAGE061
表示当前解码器与第
Figure 988543DEST_PATH_IMAGE027
个解码器之间固有误差程度的相对误差与第
Figure 934589DEST_PATH_IMAGE027
个解码器的优化误差程度的乘积结果,所有乘积结果的平均值用于表示每个位置数据的误差程度。
具体的,第
Figure 285936DEST_PATH_IMAGE027
个解码器在结合延时数据后的优化误差程度的计算方法为:
Figure 310524DEST_PATH_IMAGE062
其中,
Figure 971181DEST_PATH_IMAGE059
表示第
Figure 143536DEST_PATH_IMAGE027
个解码器在结合延时数据后的优化误差程度;
Figure 298574DEST_PATH_IMAGE058
表示第
Figure 426936DEST_PATH_IMAGE027
个解码器的固有误差程度;
Figure 9227DEST_PATH_IMAGE051
表示第
Figure 668879DEST_PATH_IMAGE027
个解码器的预测数据内的第二数据中延时数据的数量;
Figure 362028DEST_PATH_IMAGE063
表示第r个延时数据的实际采集值;
Figure 407213DEST_PATH_IMAGE064
表示第r个延时数据的预测数据值;
Figure 98089DEST_PATH_IMAGE065
表示所有延时数据对应的平均误差程度。
预测数据确定模块40,用于根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度;根据连续预测得到的预测数据以及每个位置的置信度得到未来预测数据。
在实际进行预测数据的获取时,往往是进行多次连续的预测,基于误差程度获取模块30中可得到多次连续预测的预测数据中每个位置数据的误差程度,预测数据包括第一数据和第二数据;参阅图2,其示出一组时序数据在多次预测后每个解码器对应的预测数据;其中D1,D2,D3,D4分别对应4个解码器,每个解码器的输出数据长度C为5,每个预设长度为5的时序数据输入神经网络均可得到4个解码器输出的预测数据,对于时序数据0,1,2,…,7,8而言,其对应了连续5次的预测,每次预测得到的预测数据中每个位置对应的误差程度存在差异,例如图2中所示的5次预测数据中第1个位置分别为1,2,3,4,5,且第1个位置在每次预测时均可得到不同的误差程度,共对应了5个误差程度,也即是不同时序数据输入得到的预测数据中第1个解码器的第1个位置对应了5个误差程度,因此对多次预测的预测数据中每个位置的误差程度进行获取,将每个位置对应的误差程度记为位置误差程度,位置误差程度的计算方法为:
Figure 245036DEST_PATH_IMAGE066
其中,
Figure 991144DEST_PATH_IMAGE067
表示每个位置的位置误差程度;
Figure 844831DEST_PATH_IMAGE068
表示连续预测的次数,也即是一个位置对应数据的数量;
Figure 34504DEST_PATH_IMAGE069
表示该位置第
Figure 386857DEST_PATH_IMAGE070
次预测对应位置数据的误差程度,该误差程度可能是第一数据的误差程度也可能是第二数据的误差程度,即误差程度的可能性包括
Figure 625071DEST_PATH_IMAGE031
Figure 395581DEST_PATH_IMAGE044
Figure 5423DEST_PATH_IMAGE047
以及
Figure 595804DEST_PATH_IMAGE057
Figure 637709DEST_PATH_IMAGE071
表示该位置在所有连续预测的情况下对应位置数据的误差程度的均值,也即是该位置的位置误差程度。
利用当前采集数据计算出预测数据的每个位置的位置误差程度;基于预测数据的方法,根据当前采集的最新的长度为C的时序数据作为TCN时间卷积神经网络的输入,则可得到该时序数据在时序上更靠后的预测数据,根据预测数据再次进行预测可得到更长的预测数据;由于预测数据的每个位置均对应一个位置误差程度,则对于连续预测的情况而言,后续预测数据中每个位置会基于前一次误差的基础上继续产生误差,参阅图3,其示出一种时序数据连续预测的示意图,由最新的长度为5的时序数据6,7,8,9,10作为TCN时间卷积神经网络的输入,进行一次预测得到所有解码器对应的预测数据,基于每个解码器对应的预测数据可进行二次预测,再次得到二次预测下所有解码器对应的预测数据;以此类推,由于每次预测不同位置的位置误差程度不同,而误差会随着预测次数的增加而叠加,因此需要判断预测数据中每个位置的置信度,获取所有预测下每个位置的位置误差程度的求和结果;设定误差超限系数,将误差超限系数与当前解码器对应的损失函数值的乘积作为单位误差;计算求和结果与单位误差的第一比值,根据第一比值得到对应位置的置信度,置信度与第一比值呈负相关关系。具体的,每个位置的置信度的计算方法为:
Figure 777573DEST_PATH_IMAGE072
其中,
Figure 43469DEST_PATH_IMAGE073
表示置信度;1+
Figure 324409DEST_PATH_IMAGE074
表示误差超限系数,
Figure 950431DEST_PATH_IMAGE074
由实施者自行设定,本实施例中取经验值为0.6;
Figure 695533DEST_PATH_IMAGE026
表示当前第
Figure 132331DEST_PATH_IMAGE027
个解码器的损失函数值,在网络训练过程中得到固定数值;
Figure 149834DEST_PATH_IMAGE075
表示当前位置连续预测的实际次数;
Figure 595859DEST_PATH_IMAGE076
表示当前位置第
Figure 929888DEST_PATH_IMAGE077
次预测对应的位置误差程度;
Figure 990117DEST_PATH_IMAGE078
表示所有预测次数下该位置对应的位置误差程度的求和结果,该位置在每次预测得到的位置误差程度是在前面多次预测的位置误差程度的基础上得到,求和结果越大说明叠加的误差程度越大,则对应的该位置数据的置信度越小;
Figure 307966DEST_PATH_IMAGE079
表示单位误差,用于对整体进行归一化处理;
Figure 292102DEST_PATH_IMAGE080
表示第一比值。
基于每个位置的置信度计算相同的方法,可对应得到连续预测后的预测数据中每个位置的置信度;而在不同的连续预测时,不同的位置可能会得到相同时刻的数据,例如对于任意时刻13的数据出现多次,但该数据在不同位置下的置信度的取值不同,本发明实施例中选取置信度取值最大的位置作为该数据的位置,因此基于置信度对每个位置的位置数据进行选取得到唯一的预测数据序列,记为未来预测数据,未来预测数据也即是置信度最高的预测数据。
分析预警模块50,用于获取未来预测数据中每个位置数据的预测异常度,基于预测异常度与置信度调整传输数据,由云端服务器对接收的传输数据进行分析预警。
由预测数据确定模块40得到未来预测数据,将未来预测数据中每个位置数据的置信度以及异常度进行结合调整需要传输的传输数据,未来预测数据中每个位置数据的预测异常度的计算方法与数据采集模块10中异常度计算的方法一致,即通过公式
Figure 933168DEST_PATH_IMAGE081
或者公式
Figure 977347DEST_PATH_IMAGE082
进行获取,公式的选择由该数据类型与唤醒阈值
Figure 516913DEST_PATH_IMAGE004
之间的关系决定;由此得到未来预测数据中每个位置数据对应的预测异常度。
为了减少数据传输过程中的冗余,本发明实施例中通过设置异常阈值FK以及置信度阈值ZK进行比较判定,从而决定未来预测数据中需要传输的数据,异常阈值FK以及置信度阈值ZK的设置由实施者根据实际情况自行设定。选取未来预测数据中所有位置数据对应的预测异常度的最大值以及置信度的最大值,基于预测异常度的最大值和置信度的最大值分别与异常阈值FK以及置信度阈值ZK进行比较分析,以调控传输数据;具体如下:
当预测异常度的最大值小于异常阈值FK,但置信度的最大值大于置信度阈值ZK时,仅传输低功耗传感器设备采集的该类型数据;当预测异常度的最大值小于异常阈值FK,但置信度的最大值不大于置信度阈值ZK时,传输部分高功耗传感器设备采集的该类型数据和全部的低功耗传感器设备采集的该类型数据;当预测异常度的最大值不小于异常阈值FK,且置信度的最大值不大于置信度阈值ZK时,传输部分高功耗传感器设备采集的该类型数据和全部的低功耗传感器设备采集的该类型数据;当预测异常度的最大值不小于异常阈值FK,但置信度的最大值大于置信度阈值ZK时,传输全部的高功耗传感器设备和全部的低功耗传感器设备采集的该类型数据。
由此根据未来预测数据中位置数据对应的预测异常度以及置信度得到最终需要传输的传输数据,减少了数据传输过程中的冗余,提高了效率。当云端服务器接受到传输数据之后,对接收的传输数据进行分析,针对不同类型的数据可通过不同的方法来判定是否异常,例如对于热成像中呈现的电缆过热的异常,可以使用神经网络或者传统图像的处理方法,对于湿度传感器采集的数据可以利用聚类等方式来判断异常,具体异常判定的方法均为现有机器学习算法可以实现的方法,不再详细赘述。
在根据云端服务器的分析识别出当前通信机房异常之后,通过短信、语音、图像或者视频等不同的形式来传输异常数据,即发送至对应的终端,例如将局部发热的电缆热成像图像发送给具有权限的人员的移动终端,具体发送方法实施者根据需要自行设定。
当终端接收到对应的异常数据后,以不同的形式来警示工作人员,例如GSM/GPRS/CDMA移动通讯网自动循环拨打预先设定的3组报警电话,智能识别工作人员是否接警,一旦接警,不再拨打该号码;并发送中英文短信到预先设定的工作人员手机上,通过短信内容识别报警基站,同时接警中心联网报警,中心机房可通过软件及电话进行远程布防、撤防、监听现场。
综上所述,本发明实施例提供了一种基于大数据的通信机房防护的监测管理系统,该系统包括:数据采集模块10、预测数据获取模块20、误差程度获取模块30、预测数据确定模块40以及分析预警模块50;数据采集模块10用于采集所有低功耗传感器的数据,获取每个数据的异常度,基于异常度进行唤醒调控;预测数据获取模块20用于采集唤醒调控后每个传感器对应的时序数据,将时序数据输入训练完成的神经网络输出预测数据;误差程度获取模块30用于将预测数据划分为第一数据和第二数据,获取第一数据中每个位置数据的误差程度,并基于第一数据得到神经网络中的固有误差程度,根据固有误差程度获取第二数据中每个位置数据的误差程度;预测数据确定模块40用于根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度;根据连续预测得到的预测数据以及每个位置的置信度得到未来预测数据;分析预警模块50用于获取未来预测数据中每个位置数据的预测异常度,基于预测异常度与置信度调整传输数据,由云端服务器对接收的传输数据进行分析预警;减少了传感器设备的能源消耗,提高了传输数据的效率并确保了预测数据的准确性,进而保证了监测结果的准确性。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于大数据的通信机房防护的监测管理系统,其特征在于,该系统包括以下模块:
数据采集模块,用于采集所有低功耗传感器的数据,获取每个数据的异常度,基于所述异常度进行唤醒调控;
预测数据获取模块,用于采集唤醒调控后每个传感器对应的时序数据,将所述时序数据输入训练完成的神经网络输出预测数据;
误差程度获取模块,用于将所述预测数据划分为第一数据和第二数据,获取所述第一数据中每个位置数据的误差程度,并基于所述第一数据得到神经网络中的固有误差程度,根据所述固有误差程度获取所述第二数据中每个位置数据的误差程度;
预测数据确定模块,用于根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度;根据连续预测得到的预测数据以及每个位置的所述置信度得到未来预测数据;
分析预警模块,用于获取未来预测数据中每个位置数据的预测异常度,基于所述预测异常度与所述置信度调整传输数据,由云端服务器对接收的所述传输数据进行分析预警。
2.根据权利要求1所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述误差程度获取模块中将所述预测数据划分为第一数据和第二数据的步骤,包括:
所述预测数据中存在实际采集值的位置数据为第一数据,所述预测数据中不存在实际采集值的位置数据为第二数据。
3.根据权利要求2所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述误差程度获取模块中获取所述第一数据中每个位置数据的误差程度的步骤,包括:
获取所述第一数据中每个位置数据对应的实际采集值与所述位置数据的预测数据值之间的差值,所述差值的平方为所述位置数据的误差程度。
4.根据权利要求1所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述误差程度获取模块中基于所述第一数据得到神经网络中的固有误差程度的步骤,包括:
所述神经网络包括至少两个解码器,每个所述解码器对应一个损失函数;
获取所述第一数据中所有位置数据对应的误差程度的平均值,所述平均值与每个所述解码器的损失函数值的求和的均值为神经网络中对应所述解码器的固有误差程度。
5.根据权利要求4所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述误差程度获取模块中根据所述固有误差程度获取所述第二数据中每个位置数据的误差程度的步骤,包括:
每个所述解码器对应一组预测数据,所述预测数据中包括第二数据;获取当前时刻数据的至少两个延时数据;
对于任意一个解码器对应预测数据中的第二数据:若所述第二数据中存在延时数据,以所述延时数据对应的实际采集值与预测数据值之间的差值的平方,作为所述延时数据所对应的位置数据的误差程度;获取所述预测数据中第二数据的数量,计算所述数量与对应所述解码器的固有误差程度的乘积作为总误差程度,计算所述第二数据中所有延时数据的误差程度的和作为累计误差程度,将所述总误差程度与所述累计误差程度的差值记为累加误差程度;获取所述第二数据中除了延时数据之外其他位置数据的总数量,所述累加误差程度与所述总数量的比值为所述第二数据中除了延时数据之外其他各位置数据的误差程度;
若所述第二数据中不存在延时数据,计算当前所述解码器的固有误差程度与其他每个所述解码器的固有误差程度之间的比值,获取其他每个所述解码器的优化误差程度;其中,所述优化误差程度与对应所述解码器的固有误差程度呈正相关关系;计算每个所述比值及其对应所述解码器的优化误差程度的乘积结果,所有乘积结果的平均值为当前所述解码器的第二数据中各位置数据的误差程度。
6.根据权利要求4所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述预测数据确定模块中根据连续预测得到的预测数据中每个位置数据的误差程度获取对应每个位置的置信度的步骤,包括:
获取每次预测得到的预测数据中每个位置对应的位置数据的误差程度;计算连续预测的预测数据中各位置的误差程度的平均值作为对应位置的位置误差程度;
获取所有预测下每个位置的位置误差程度的求和结果;设定误差超限系数,将所述误差超限系数与当前解码器对应的损失函数值的乘积作为单位误差;
计算所述求和结果与所述单位误差的第一比值,根据所述第一比值得到对应位置的置信度,所述置信度与所述第一比值呈负相关关系。
7.根据权利要求1所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述预测数据确定模块中根据连续预测得到的预测数据以及每个位置的所述置信度得到未来预测数据的步骤,包括:
连续预测得到的预测数据中存在不同位置对应相同时刻的数据,选取置信度最大时的位置作为该数据的位置,以得到未来预测数据。
8.根据权利要求1所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述数据采集模块中获取每个数据的异常度,基于所述异常度进行唤醒调控的步骤,包括:
设定唤醒阈值并获取数据的类型,数据的类型包括数据越小越正常和数据越大越正常;
对于数据越小越正常的类型的数据,计算此类型数据的最大异常值与所述唤醒阈值的差值作为分母,以当前数据与所述唤醒阈值的差值作为分子,所述分子和分母的比值为当前数据的异常度;
对于数据越大越正常的类型的数据,计算所述唤醒阈值与此类型数据的最小异常值的差值作为分母,以所述唤醒阈值和当前数据的差值作为分子,所述分子和分母的比值为当前数据的异常度;
构建每个低功耗传感器对应的高功耗设备集合,基于低功耗传感器的当前数据的异常度与预设基础阈值的求和作为唤醒比例,所述唤醒比例与低功耗传感器对应的高功耗设备集合中所有高功耗传感器的数量的乘积为唤醒数量;
根据所述唤醒数量在对应的高功耗设备集合中进行设备唤醒。
9.根据权利要求8所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述基于所述预测异常度与所述置信度调整传输数据的步骤,包括:
选取未来预测数据中的预测异常度的最大值和置信度的最大值;根据预测异常度的最大值和置信度的最大值分别与预设的异常阈值和置信度阈值比较:
当预测异常度的最大值小于异常阈值,但置信度的最大值大于置信度阈值时,仅传输低功耗传感器采集的数据;
当预测异常度的最大值小于异常阈值,但置信度的最大值不大于置信度阈值时,传输部分高功耗传感器采集的数据和全部的低功耗传感器采集的数据;
当预测异常度的最大值不小于异常阈值,且置信度的最大值不大于置信度阈值时,传输部分高功耗传感器采集的数据和全部的低功耗传感器采集的数据;
当预测异常度的最大值不小于异常阈值,但置信度的最大值大于置信度阈值时,传输全部的高功耗传感器和全部的低功耗传感器采集的数据。
10.根据权利要求1所述的一种基于大数据的通信机房防护的监测管理系统,其特征在于,所述由云端服务器对接收的所述传输数据进行分析预警的步骤,包括:
所述云端服务器采用不同的机器学习算法得到对应传输数据是否存在异常,若存在异常,将存在异常的数据传输至对应的终端,由所述终端进行预警。
CN202211429943.7A 2022-11-16 2022-11-16 一种基于大数据的通信机房防护的监测管理系统 Active CN115495320B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211429943.7A CN115495320B (zh) 2022-11-16 2022-11-16 一种基于大数据的通信机房防护的监测管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211429943.7A CN115495320B (zh) 2022-11-16 2022-11-16 一种基于大数据的通信机房防护的监测管理系统

Publications (2)

Publication Number Publication Date
CN115495320A true CN115495320A (zh) 2022-12-20
CN115495320B CN115495320B (zh) 2023-02-17

Family

ID=85115758

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211429943.7A Active CN115495320B (zh) 2022-11-16 2022-11-16 一种基于大数据的通信机房防护的监测管理系统

Country Status (1)

Country Link
CN (1) CN115495320B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116433050A (zh) * 2023-04-26 2023-07-14 同心县京南惠方农林科技有限公司 应用于农业大数据管理系统的异常报警方法及系统
CN116805275A (zh) * 2023-08-21 2023-09-26 中国标准化研究院 一种基于数据分析的公共机构能耗智能监管系统
CN116955091A (zh) * 2023-09-20 2023-10-27 深圳市互盟科技股份有限公司 基于机器学习的数据中心故障检测系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160369777A1 (en) * 2015-06-03 2016-12-22 Bigwood Technology, Inc. System and method for detecting anomaly conditions of sensor attached devices
US20180275642A1 (en) * 2017-03-23 2018-09-27 Hitachi, Ltd. Anomaly detection system and anomaly detection method
US10679390B1 (en) * 2016-07-19 2020-06-09 Uber Technologies, Inc. Confidence threshold determination for machine-learned labeling
US20200210263A1 (en) * 2018-12-28 2020-07-02 AO Kaspersky Lab System and method for detecting anomalies in cyber-physical system with determined characteristics
CN112364975A (zh) * 2020-10-14 2021-02-12 山东大学 基于图神经网络的终端运行状态预测方法及系统
WO2021156271A1 (en) * 2020-02-05 2021-08-12 Another Brain Anomaly detector, method of anomaly detection and method of training an anomaly detector
CN114881115A (zh) * 2022-04-02 2022-08-09 中国科学院计算技术研究所 一种基于图神经网络的多变量时间序列异常检测方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160369777A1 (en) * 2015-06-03 2016-12-22 Bigwood Technology, Inc. System and method for detecting anomaly conditions of sensor attached devices
US10679390B1 (en) * 2016-07-19 2020-06-09 Uber Technologies, Inc. Confidence threshold determination for machine-learned labeling
US20180275642A1 (en) * 2017-03-23 2018-09-27 Hitachi, Ltd. Anomaly detection system and anomaly detection method
US20200210263A1 (en) * 2018-12-28 2020-07-02 AO Kaspersky Lab System and method for detecting anomalies in cyber-physical system with determined characteristics
WO2021156271A1 (en) * 2020-02-05 2021-08-12 Another Brain Anomaly detector, method of anomaly detection and method of training an anomaly detector
CN112364975A (zh) * 2020-10-14 2021-02-12 山东大学 基于图神经网络的终端运行状态预测方法及系统
CN114881115A (zh) * 2022-04-02 2022-08-09 中国科学院计算技术研究所 一种基于图神经网络的多变量时间序列异常检测方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
回春立等: "无线传感器网络中基于预测的时域数据融合技术", 《计算机工程与应用》 *
王方等: "基于优化神经网络的地质灾害监测预警仿真", 《计算机仿真》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116433050A (zh) * 2023-04-26 2023-07-14 同心县京南惠方农林科技有限公司 应用于农业大数据管理系统的异常报警方法及系统
CN116433050B (zh) * 2023-04-26 2023-10-24 同心县京南惠方农林科技有限公司 应用于农业大数据管理系统的异常报警方法及系统
CN116805275A (zh) * 2023-08-21 2023-09-26 中国标准化研究院 一种基于数据分析的公共机构能耗智能监管系统
CN116805275B (zh) * 2023-08-21 2023-11-21 中国标准化研究院 一种基于数据分析的公共机构能耗智能监管系统
CN116955091A (zh) * 2023-09-20 2023-10-27 深圳市互盟科技股份有限公司 基于机器学习的数据中心故障检测系统
CN116955091B (zh) * 2023-09-20 2024-04-30 深圳市互盟科技股份有限公司 基于机器学习的数据中心故障检测系统

Also Published As

Publication number Publication date
CN115495320B (zh) 2023-02-17

Similar Documents

Publication Publication Date Title
CN115495320B (zh) 一种基于大数据的通信机房防护的监测管理系统
CN103246265B (zh) 机电设备检测维护方法
US20230175652A1 (en) Safety monitoring methods and internet of things systems of pipe network reliability degree based on intelligent gas
CN104079874A (zh) 一种基于物联网技术的安防一体化系统及方法
CN109460835A (zh) 现场硬件设备管控系统及方法
CN105069695A (zh) 一种智能变电站实时风险分析系统及分析方法
CN109951363B (zh) 数据处理方法、装置及系统
CN115640915B (zh) 一种智慧燃气管网压缩机安全管理方法和物联网系统
WO2022124276A1 (ja) 室内空気品質予測方法、及び室内空気品質検出システム
CN113763667B (zh) 一种基于5g边缘计算的火灾预警及状态监测装置及方法
CN115086378A (zh) 基于云平台的智能物联网监控系统及方法
CN111864909A (zh) 新能源变电站智能辅助控制系统
CN116308256A (zh) 一种供热网故障检测及维护方法及系统
CN113068144A (zh) 一种环境监控物联网系统
CN115933762A (zh) 闸门开度的调整方法、装置和设备
CN115687447A (zh) 一种基于物联网的海洋环境监测系统及方法
CN111210083A (zh) 一种管网异常分析方法
CN116951328B (zh) 基于大数据的排水管线运行智慧监控系统
CN114204677A (zh) 一种发电设备的远程监控方法与系统
CN116225102B (zh) 一种移动式的储能通信温升自动监控系统及装置
CN116744357A (zh) 基站故障预测方法、装置、设备和介质
CN110763269B (zh) 一种变电站环境安全监控系统
CN113570808A (zh) 一种基于zynq7020的无线烟感探测器
CN117691752B (zh) 一种具有通讯功能的低压台区停电自动报警装置
CN115167190B (zh) 一种锅炉水人工智能管理系统及其应用

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A monitoring and management system for communication room protection based on big data

Effective date of registration: 20230310

Granted publication date: 20230217

Pledgee: Jining Rural Commercial Bank Co.,Ltd.

Pledgor: Zhilian Xintong Technology Co.,Ltd.

Registration number: Y2023980034367