CN105187239A - 基于数据挖掘的通信告警分析系统及其处理方法 - Google Patents

基于数据挖掘的通信告警分析系统及其处理方法 Download PDF

Info

Publication number
CN105187239A
CN105187239A CN201510503595.7A CN201510503595A CN105187239A CN 105187239 A CN105187239 A CN 105187239A CN 201510503595 A CN201510503595 A CN 201510503595A CN 105187239 A CN105187239 A CN 105187239A
Authority
CN
China
Prior art keywords
alarm
data warehouse
analysis
module
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510503595.7A
Other languages
English (en)
Inventor
印鉴
柳黛君
李庆林
司徒宇恒
刘杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Yat Sen University
SYSU CMU Shunde International Joint Research Institute
Original Assignee
Sun Yat Sen University
SYSU CMU Shunde International Joint Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sun Yat Sen University, SYSU CMU Shunde International Joint Research Institute filed Critical Sun Yat Sen University
Priority to CN201510503595.7A priority Critical patent/CN105187239A/zh
Publication of CN105187239A publication Critical patent/CN105187239A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02Standardisation; Integration
    • H04L41/024Standardisation; Integration using relational databases for representation of network management data, e.g. managing via structured query language [SQL]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0631Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/069Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明涉及的系一种通信网络监控到的告警信息,结合数据挖掘技术,对网管系统中出现的通信告警建立数据仓库,利用关联分析和回归预测方法,分析海量通信告警;本发明有两个目的:第一个是将同一时间出现的不同专业的告警信息进行关联分析,提炼出最有利于故障分析的告警信息,最快的速度找出决定告警的直接原因;第二个是通过回归预测,挖掘出具有预警信息的告警,预测出来潜在问题,在代维人员巡检的过程中,重点关注,防止信号中断。从而及时有效的处理通信故障,保障信号质量。

Description

基于数据挖掘的通信告警分析系统及其处理方法
技术领域
本发明涉及电信网络管理领域,具体而言属于电信网络管理中对监控到的通信网络告警的分析和处理。
背景技术
目前,在电信监控机房,网管监控人员为24小时上岗,监控来自无线、传输、交换、数固、动力等各个专业的不同设备上传到网管系统的网络告警;作为把控网络告警的第一道关口,网管监控人员责任重大,准确判断告警的重要性并及时通知专业维护人员去处理尤为重要。然而,对于没有通信专业背景知识的网管监控人员而言,目前处理告警的常见方法是:按照以往处理告警的经验,排除掉一些误告和不影响基站运行的告警,再将分属不同专业的不同设备上的告警信息反馈给各专业维护人员。
上述处理方法存在以不下足之处:首先,网管人员在对告警做第一次过滤的时候,由于依靠经验等人为因素,有可能会出现判断错误,导致一些重要告警被忽略掉,故障不能及时处理和排除,从而影响基站的正常运行;其次,有部分告警虽然同一时间出现在不同专业的不同设备上面,但有可能只是一个专业的问题,导致其他专业设备同时出现附带的告警;比如:某基站电源设备出现停电告警,会导致无线侧出现该基站对应GSM小区退服、基站断站,传输侧会出现该基站两侧的E1线路中断等一系列附带告警,能否从大量告警中找到最重要的源头所在,及时将准确判断后的结果通知到基站维护人员,除了需要网管日积月累的经验外,还需要网管对各专业知识的深入了解,况且在机房,网管24小时加班,一年换一批人,人员轮换很快,当新的网管监控人员到来时,有需要很长时间才能上手处理故障。
发明内容
本发明的目的在于克服上述现有技术存在的种种不足,而提供一种结合数据挖掘技术,运用关联分析对告警做深入分析,运用回归技术对告警做预测,从而及时准确地将通信告警通知给专业维护人员,以提高故障处理效率及其处理质量的基于数据挖掘的通信告警分析系统。
本发明的另一目的还在于提供一种基于数据挖掘的通信告警分析系统的处理方法。
本发明解决其技术问题所采用的技术方案如下:
基于数据挖掘的通信告警分析系统,其特征是,包括通信告警监控平台、数据仓库模块、关联分析模块和回归预测模块,所述通信告警监控平台用于采集来自不同专业、不同设备的告警信息,并将采集到的告警信息存储入数据仓库模块,所述数据仓库模块用于存储告警信息、并按照告警的关联ID、专业ID、告警来源、告警名称和告警分析分别存储,所述关联分析模块是结合各专业告警进行整体分析,并将分析结果记录在数据仓库模块中,当出现新告警信息时,直接由数据仓库中相同告警得出分析结果,对告警做出准确判断,所述回归预测模块是对一些具有周期性出现的告警进行回归预测,在巡检过程中重点排查隐患,防止设备故障影响信号发送。
本发明的另一目的是这样:
一种基于数据挖掘的通信告警分析系统的处理方法,其特征是,包括如下处理步骤:通信告警监控平台会将采集到的告警信息存储在数据仓库中,由关联分析模块进行分析认定,确定告警源头及故障类别,由数据仓库中的关联ID列设置为同一号码,专家在同一故障源的告警分析列中写明告警缘由,并存储入数据仓库中形成历史告警,以便下次有同样告警出现时,直接从数据仓库中抽取故障分析,根据告警分析进行操作,回归预测模块会根据历史告警,从数据仓库中找出跟设备器件相关的周期性出现的故障告警,按照回归预测方法,预测出下次故障出现时间,提前安排代维排查隐患,定期复查,防范设备故障引起信号中断。
以下作进一步清晰、详细之说明:
本发明的数据仓库模块、关联分析模块和回归预测模块这三大模块均建基于通信告警监控平台上;机房监控的告警存储在数据仓库中,由无线、传输、交换、数固、动力等各个专业不同设备,按以往出现过的通信告警,先排除部分因为割接线路、新建基站、误报等引起的告警,重复出现的告警只留一份记录,根据专业和告警类型分为不同维度存储。比如:无线专业有环境告警、设备板件故障告警、网络故障告警等;动力专业有环境告警、机房电压电流告警等;传输专业有E1线路故障告警、光口告警等。
关联分析模块主要是出现在数据存储至数据仓库之后,将历史告警进行预处理,由专业人员也就是专家对告警原因做分析,将处理过的历史告警作为训练集。针对同一时间出现的并发性告警,在以往网管监控人员处理告警的过程中,都是将各种设备所属专业的告警分别通知到不同专业的维护人员。这样不具有针对性和灵活性。运用关联分析模块,不再单独针对专业,而是结合各专业告警进行整体分析,并将分析结果记录在数据仓库中,同一故障引起的并发告警,所属关联ID相同,关联ID是数据仓库中的唯一关系值。
回归预测模块也是在专家对历史告警进行原因分析以后,对一些具有周期性出现的告警进行回规预测。代维人员每天都会去自己管辖的机房进行巡检,巡检内容主要是针对环境告警设备,比如:温度、电压、高温、门禁等。而一些设备的隐患问题不属于巡检范围,设备故障也是在出现了告警之后才会去维护。针对这种问题,回归预测模块将历史告警作为训练集,找出具有规律性出现的告警,针对其中的设备故障隐患类告警重点关注,让代维在巡检的过程中重点排查隐患,防止设备故障影响信号发送。
本发明的有益效果如下:
(1)本发明将数据挖掘技术运用到通信告警中,利用数据挖掘寻找潜在的告警规律,将以往的告警通过数据仓库存储,利用关联分析从大量的告警信息中提炼出最有利于故障分析的告警信息,通过回归预测将一些能够预测出来的潜在问题提前解决,预防信号中断,提高通信质量。
再有,本发明可通过网络监控人员在网络告警出现后能够迅速对告警原因做出判断,同时,针对设备隐患能够尽早排查,防止引起通信信号中断。
附图说明
图1为本发明基于数据挖掘的通信告警分析系统的整体方框图;
图2为本发明的数据仓库模块示意图;
图3为本发明的关联分析模块示意图;
图4为本发明的回归预测模块示意图。
具体实施方式
如图1至图4所示,基于数据挖掘的通信告警分析系统,包括通信告警监控平台、数据仓库模块、关联分析模块和回归预测模块,系统从通信告警监控平台采集来自不同专业不同设备的告警信息,通过专家系统,进行关联分析和回归预测,并将结果放入数据仓库,当再有新告警出现时,从数据仓库查找是否相同历史告警,若有,直接从历史告警的分析报告里面查找如何处理告警信息。
见图2所示,为数据仓库模块,里面按照依次记录了历时告警的关联ID、专业ID、告警来源(网元)、告警名称、告警分析。当有新告警出现时,直接从数据仓库里面查找是否有相同的告警来源(网元)和告警名称,根据告警分析操作。
见图3所示,为关联分析模块,关联分析模块主要是收集历史告警,专家判断不同告警是否具有关联性,针对有关联性的告警,找出引起告警的核心原因,标记关联ID相同,存储至数据仓库;当出现新告警时,核对告警仓库中的历史告警,针对和历史告警相同的告警,直接提取告警分析,忽略并发告警。
见图4所示,是回归预测模块,回归预测模块主要是收集历史告警,针对具有周期性出现的设备告警,安排代维定期针对有隐患的设备检修排查。
以下就本发明记载的技术方案,作其中具体实施的工作原理说明:
先将最近一年的无线、传输、交换、动力、数固专业的所有设备监控平台上的历史告警信息,按照专业和设备名称的不同,分别存储在数据仓库中;根据实际需要,可在一个专业下面设置有数台监控设备。先排除部分因为割接线路、新建基站、误报等引起的告警,根据专业下的设备名称分为不同维度存储。
如:在同一时间某基站电源设备,出现停电告警,该基站在无线监控设备出现基站对应GSM小区退服、基站断站,传输监控设备出现该基站及拓扑图中两侧基站E1线路中断等一系列附带告警,那么根据关联分析可以认定,该基站是告警源头,且是由于动力专业停电引起的传输、无线故障。将此基站引起的所有一系列告警在数据仓库中的关联ID列设置为同一号码,专家在同一故障源的告警分析列中写明告警缘由,以便下次有同样告警出现时,直接从数据仓库中抽取故障分析,根据告警分析进行操作,省去依靠网络监控人员人为判断出现错误的几率,也节约了处理时间;另一方面,根据历史告警,从数据仓库模块中找出跟设备器件相关的周期性出现的故障告警,再按照回归预测方法,预测出下次故障出现时间,提前安排代为排查隐患,定期复查,防范设备故障引起信号中断。

Claims (2)

1.基于数据挖掘的通信告警分析系统,其特征是,包括通信告警监控平台、数据仓库模块、关联分析模块和回归预测模块,所述通信告警监控平台用于采集来自不同专业、不同设备的告警信息,并将采集到的告警信息存储入数据仓库模块,所述数据仓库模块用于存储告警信息、并按照告警的关联ID、专业ID、告警来源、告警名称和告警分析分别存储,所述关联分析模块是结合各专业告警进行整体分析,并将分析结果记录在数据仓库模块中,当出现新告警信息时,直接由数据仓库中相同告警得出分析结果,对告警做出准确判断,所述回归预测模块是对一些具有周期性出现的告警进行回归预测,在巡检过程中重点排查隐患,防止设备故障影响信号发送。
2.一种如权利要求1所述基于数据挖掘的通信告警分析系统的处理方法,其特征是,包括如下处理步骤:通信告警监控平台会将采集到的告警信息存储在数据仓库中,由关联分析模块进行分析认定,确定告警源头及故障类别,由数据仓库中的关联ID列设置为同一号码,专家在同一故障源的告警分析列中写明告警缘由,并存储入数据仓库中形成历史告警,以便下次有同样告警出现时,直接从数据仓库中抽取故障分析,根据告警分析进行操作,回归预测模块会根据历史告警,从数据仓库中找出跟设备器件相关的周期性出现的故障告警,按照回归预测方法,预测出下次故障出现时间,提前安排代维排查隐患,定期复查,防范设备故障引起信号中断。
CN201510503595.7A 2015-08-17 2015-08-17 基于数据挖掘的通信告警分析系统及其处理方法 Pending CN105187239A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510503595.7A CN105187239A (zh) 2015-08-17 2015-08-17 基于数据挖掘的通信告警分析系统及其处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510503595.7A CN105187239A (zh) 2015-08-17 2015-08-17 基于数据挖掘的通信告警分析系统及其处理方法

Publications (1)

Publication Number Publication Date
CN105187239A true CN105187239A (zh) 2015-12-23

Family

ID=54909093

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510503595.7A Pending CN105187239A (zh) 2015-08-17 2015-08-17 基于数据挖掘的通信告警分析系统及其处理方法

Country Status (1)

Country Link
CN (1) CN105187239A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106528380A (zh) * 2016-11-14 2017-03-22 郑州云海信息技术有限公司 一种服务器预警方法及装置
CN106789347A (zh) * 2017-01-22 2017-05-31 山东浪潮商用系统有限公司 一种基于告警数据实现告警关联和网络故障诊断的方法
CN107451040A (zh) * 2017-07-07 2017-12-08 深信服科技股份有限公司 故障原因的定位方法、装置及计算机可读存储介质
CN108551208A (zh) * 2018-04-26 2018-09-18 国网上海市电力公司 一种地区电网监控信息频发综合治理系统
CN108737173A (zh) * 2018-05-17 2018-11-02 武汉微创光电股份有限公司 一种网络告警过滤方法及系统
CN116883952A (zh) * 2023-09-07 2023-10-13 吉林同益光电科技有限公司 基于人工智能算法的电力施工现场违章识别方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101582807A (zh) * 2009-07-02 2009-11-18 北京讯风光通信技术开发有限责任公司 一种基于北向接口实现网络管理的方法及系统
US7930746B1 (en) * 2005-12-29 2011-04-19 At&T Intellectual Property Ii, L.P. Method and apparatus for detecting anomalous network activities
CN103020006A (zh) * 2011-09-24 2013-04-03 国家电网公司 一种基于海量数据挖掘的设备状态预测方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7930746B1 (en) * 2005-12-29 2011-04-19 At&T Intellectual Property Ii, L.P. Method and apparatus for detecting anomalous network activities
CN101582807A (zh) * 2009-07-02 2009-11-18 北京讯风光通信技术开发有限责任公司 一种基于北向接口实现网络管理的方法及系统
CN103020006A (zh) * 2011-09-24 2013-04-03 国家电网公司 一种基于海量数据挖掘的设备状态预测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
贾卫军: "数据挖掘技术在电信网管系统中的应用研究", 《中国优秀硕士学位论文全文数据库信息科技辑(月刊)》 *
陈怀南: "通信网络告警相关性规则挖掘方法研究", 《中国优秀博硕士学位论文全文数据库 (硕士)信息科技辑(季刊)》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106528380A (zh) * 2016-11-14 2017-03-22 郑州云海信息技术有限公司 一种服务器预警方法及装置
CN106789347A (zh) * 2017-01-22 2017-05-31 山东浪潮商用系统有限公司 一种基于告警数据实现告警关联和网络故障诊断的方法
CN107451040A (zh) * 2017-07-07 2017-12-08 深信服科技股份有限公司 故障原因的定位方法、装置及计算机可读存储介质
CN107451040B (zh) * 2017-07-07 2020-12-01 深信服科技股份有限公司 故障原因的定位方法、装置及计算机可读存储介质
CN108551208A (zh) * 2018-04-26 2018-09-18 国网上海市电力公司 一种地区电网监控信息频发综合治理系统
CN108737173A (zh) * 2018-05-17 2018-11-02 武汉微创光电股份有限公司 一种网络告警过滤方法及系统
CN108737173B (zh) * 2018-05-17 2022-02-25 武汉微创光电股份有限公司 一种网络告警过滤方法及系统
CN116883952A (zh) * 2023-09-07 2023-10-13 吉林同益光电科技有限公司 基于人工智能算法的电力施工现场违章识别方法及系统
CN116883952B (zh) * 2023-09-07 2023-11-17 吉林同益光电科技有限公司 基于人工智能算法的电力施工现场违章识别方法及系统

Similar Documents

Publication Publication Date Title
CN105187239A (zh) 基于数据挖掘的通信告警分析系统及其处理方法
CN102638100B (zh) 地区电网设备异常告警信号关联分析与诊断方法
CN105160483A (zh) 一种基于数据挖掘的二次设备故障诊断方法
CN110502398B (zh) 一种基于人工智能的交换机故障预测系统及方法
CN106655522A (zh) 一种适用于电网二次设备运维管理的主站系统
CN109861390A (zh) 一种电力设备运行监控系统
CN104574557B (zh) 一种基于告警的站点巡检方法、操控装置和系统
CN105262210A (zh) 一种变电站网络安全性分析预警系统和方法
CN107168197A (zh) 智能电网二次设备远程管控方法
CN104574219A (zh) 电网业务信息系统运行工况的监测预警方法及系统
CN106100884A (zh) 变电站监控设备运行异常的告警方法
CN116185757B (zh) 机房能耗智能监测系统
CN110784352A (zh) 一种基于Oracle Goldengate的数据同步监控告警方法及装置
CN113778064A (zh) 一种智能设备远程检测诊断系统
CN115848463A (zh) 智能运维系统和方法
CN116523502A (zh) 一种智能生产线运维管理报警系统
CN107064743A (zh) 基于云分析与识别的配电网暂态波故障循迹方法与装置
CN102984013B (zh) 一种用于通信传输网的告警分析方法
CN117150418B (zh) 基于状态特征故障树的变压器运检周期制定方法和系统
CN106709659A (zh) 一种lng加气站设备管理系统
CN105242655A (zh) 基于物联网的工业现场监控装置
CN116840766A (zh) 基于知识图谱的电力计量设备状态追踪与异常监控方法
CN112449019A (zh) 一种ims智能物联网运维管理平台
CN103268353B (zh) 电网报警自动响应系统及电网报警自动响应方法
CN112491598B (zh) 一种olt掉电脱网预警分析方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20151223

RJ01 Rejection of invention patent application after publication