CN106529025A - 一种网络故障诊断方法 - Google Patents
一种网络故障诊断方法 Download PDFInfo
- Publication number
- CN106529025A CN106529025A CN201610983242.6A CN201610983242A CN106529025A CN 106529025 A CN106529025 A CN 106529025A CN 201610983242 A CN201610983242 A CN 201610983242A CN 106529025 A CN106529025 A CN 106529025A
- Authority
- CN
- China
- Prior art keywords
- fault diagnosis
- variables
- symptom variables
- symptom
- grader
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims abstract description 22
- 208000024891 symptom Diseases 0.000 claims abstract description 52
- 238000012360 testing method Methods 0.000 claims abstract description 24
- 238000012549 training Methods 0.000 claims abstract description 16
- 238000004891 communication Methods 0.000 abstract description 3
- 238000004422 calculation algorithm Methods 0.000 description 5
- 230000004888 barrier function Effects 0.000 description 4
- 241000288113 Gallirallus australis Species 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 238000002405 diagnostic procedure Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/10—Geometric CAD
- G06F30/18—Network design, e.g. design based on topological or interconnect aspects of utility systems, piping, heating ventilation air conditioning [HVAC] or cabling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/30—Circuit design
- G06F30/36—Circuit design at the analogue level
- G06F30/367—Design verification, e.g. using simulation, simulation program with integrated circuit emphasis [SPICE], direct methods or relaxation methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
- H04L41/065—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis involving logical or physical relationship, e.g. grouping and hierarchies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2111/00—Details relating to CAD techniques
- G06F2111/02—CAD in a network environment, e.g. collaborative CAD or distributed simulation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Geometry (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Signal Processing (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Data Mining & Analysis (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供了一种网络故障诊断方法,属于通信网络领域。该方法包括:(1)从网络历史数据库中获取历史数据,所述历史数据包括症状变量集和故障类变量集;(2)构建加权平均依赖分类器预测模型;(3)所述加权平均依赖分类器预测模型通过所述历史数据自动学习到分类器参数,形成已训练完成的加权平均依赖分类器;(4)进行故障诊断时,将测试数据输入所述已训练完成的加权平均一依赖分类器,得到对应的故障诊断结果。
Description
技术领域
本发明属于通信网络领域,具体涉及一种网络故障诊断方法。
背景技术
现代网络具有网络规模大,拓扑复杂的特点。若网络出现故障并未及时准确地检测出故障点,会对经济、民生产生重大不利影响。因此,及时有效的网络故障检测是十分重要的。
早期依赖专家知识检测网络故障的方法已经难以保证当前大规模、高复杂度网络的稳定性。因此,在大型复杂网络中,智能诊断大量应用,在这些智能诊断方法中就包括了机器学习领域内的数据分类算法。
朴素贝叶斯算法(naive Bayes,简称NB)是基于贝叶斯规则的监督学习算法,它遵循了贝叶斯假设,也叫做朴素贝叶斯条件独立假设,该假设极大的简化了该算法的贝叶斯网络结构。因此,NB无论在模型训练阶段还是在测试阶段都是高效的。这种高效基本来自于条件独立假设。而这种条件独立假设在实践中通常与真实的数据情况相违背,NB的分类精度因此受到了影响。为了提高NB的分类精度,许多研究人员通过释放严格的条件独立假设提出了一些新的分类算法。后续的,GI Webb等人提出了改进了朴素贝叶斯的AODE算法(如图1所示)。与NB相比,AODE针对测试数据考虑了普通属性值的出现对测试数据概率分布的影响,以此来提高分类精度,与此同时也增加了AODE模型的贝叶斯网络的复杂度,其训练时间复杂度和测试时间复杂度与NB相比都有相应的增加。
然而,AODE没有考虑除类标签外,普通属性之间的关系对数据分布的积极影响。这样,数据分类准确就受到影响。因此,本领域需要一种准确性更高而计算复杂度增长较小的网络故障诊断方法。
考虑到对于任意属性对Ai,Aj,如果它们之间的依赖关系越强,对P(Aj|Ai)或者P(Ai|Aj)的估计值就更有信心。因此,在AODE的基础上,期待以考虑属性之间的关系调整概率分布,来提高AODE的分类精度。
发明内容
本发明的目的在于解决上述现有技术中存在的难题,提供一种网络故障诊断方法,有效提高网络诊断的准确性并保持良好的容错能力。
本发明是通过以下技术方案实现的:
一种网络故障诊断方法,包括:
(1)从网络历史数据库中获取历史数据,所述历史数据包括症状变量集和故障类变量集;
(2)构建加权平均依赖分类器预测模型;
(3)所述加权平均依赖分类器预测模型通过所述历史数据自动学习到分类器参数,形成已训练完成的加权平均依赖分类器;
(4)进行故障诊断时,将测试数据输入所述已训练完成的加权平均依赖分类器,得到对应的故障诊断结果。
所述步骤(2)中的加权平均依赖分类器预测模型如下:
其中,t为测试数据,Y为故障类变量集,y为故障类变量的值,p(y,xi)为对应的故障类变量y和症状变量xi的联合概率,i=1,2,…,m,m为症状变量个数且F(xi)≥g,F(xi)表示xi在训练数据中的频数;另外,p(xj|y,xi)为症状变量xj和症状变量xi与故障变量y的条件概率,j=1,2,…,m,wij为症状变量xi和症状变量xj的权重。该预测模型与分类器的表达式是一样的。
所述g的取值为30。
所述症状变量xi和症状变量xj的权重wij如下:
其中,p(xi,xj,y)为xi和xj及y的联合概率,p(xi|y)和p(xj|y)分别为xi和xj的条件概率,i=1,2,...,m而j=2,3,...,m且j≥i。
在步骤(3)中,所述的分类器参数包括症状变量联合概率p(xi,xj,y),p(xi,y)以及故障变量概率p(y),具体为:
其中n为在给定y值的情况下训练样例个数,ni为第i个症状变量的值和故障类值确定的情况下训练样例的个数,nij为第i,j个症状变量的值和故障类值确定的情况下训练样例的个数,并且c(·)为·的基值,F(·)为·的频数。
所述步骤(4)中的所述测试数据包括症状变量集所声明的属性值。
与现有技术相比,本发明的有益效果是:
1,本发明方法提高了网络故障诊断的准确率,且不受属性缺失值的影响,具有容错能力;
2,本发明针对现有通信网络规模大,网络拓扑复杂度高的特点,设计了一种基于加权平均一依赖分类器,通过该分类器对网络进行故障诊断,提高了分类器自身的学习能力。
附图说明
图1是AODE分类器结构图;
图2是故障诊断方案流程图;
图3是WAODE分类器结构图;
图4是实施例中获取的历史数据示意图;
图5是实例中故障变量与症状变量统计图;
图6是历史数据丢失时采用不同预测模型下的故障诊断准确率统计图。
具体实施方式
下面结合附图对本发明作进一步详细描述:
针对现有技术的以上缺陷,本发明提出了一种基于加权平均依赖分类器的网络故障诊断方法,有效解决大型网络的网络故障诊断准确率较低的问题。
本发明方法如图2所示,包括:
(1)从网络历史数据库中获取历史数据,所述历史数据包括症状变量集和故障类变量集;
(2)构建加权平均依赖分类器预测模型;
(3)所述加权平均依赖分类器预测模型通过所述历史数据自动学习到分类器参数,获得已训练完成的加权平均依赖分类器;
(4)进行故障诊断时,对测试数据利用上述已训练完成的加权平均依赖分类器进行估计,最终得到对应的故障诊断结果;
所述步骤(4)中的所述测试数据包括症状变量集所声明的属性值,所述加权平均一依赖分类器通过训练,给出该测试数据的分类结果,即故障类型。所谓的测试数据可以认为由n条测试样例(test instance)组成,n=1,2,3,4,…,分类器一次测试一条testinstance,并对该条test instance给出分类结果。
本发明采用分类准确率来评估分类器的分类性能。
假设有100个测试样例,分类器分对70个样例,分类器分类准确率就是70%了。
一般在论文中是这样描述的:精确率是在“95%信任区间”上通过“10折交叉验证”的方式估计出来的。
分类器针对某一测试样例给出分类结果,这个“结果”就是该分类器给出的诊断结果。
WAODE分类器模型结构如图3所示,其中Y是类节点,即故障类变量集(故障变量集由图4所示,c1—c6),指向所有的属性A1,A2,…,Ai,…,Am,即症状变量集(Ai代表症状变量集中的一个属性,它本质上是一个随机变量。如图5所示,若i=2,A2是症状变量集的一个属性(又叫随机变量)。根据本发明中对症状集属性值的限定,A2的值可以为1,也可为0),Wij是属性Ai与Aj之间的权重,属性Ai指向其他所有属性但不包括类节点。
所述的症状变量集,具体为:症状变量取值均为名词性属性值(如图4中的A1-A10这10个属性,它们只能从{0,1}中取值,视为名词性属性(与数值属性相区分)),若有数值类型值,均需离散化处理(通常可使用Weka软件的无监督的属性过滤器Discretize离散掉所有的连续的属性值),且对某症状变量的缺失值只标注(通常可使用Weka软件的无监督的属性过滤器ReplaceMissingValues将缺失值替换成”*”)而不做其他特殊处理。
在步骤(2)中,所述加权平均一依赖分类器预测模型CWAODE具体为:
其中,t为测试数据,Y为故障类变量集,y为故障类变量的值,p(y,xi)为对应的故障类变量y和症状变量xi的联合概率,i=1,2,...,m,m为症状变量个数且F(xi)≥g,F(xi)表示xi在训练数据中的频数,g通常设定为30。另外,p(xj|y,xi)为症状变量xj和症状变量xi与故障变量y的条件概率,j=1,2,...,m。符号wij为症状变量xi和症状变量xj的权重。
所述症状变量xi和症状变量xj的权重wij具体为:
其中,m为症状变量集变量个数,p(xi,xj,y)为xi和xj及y的联合概率,p(xi|y)和p(xj|y)分别为xi和xj的条件概率,i=1,2,...,m而j=2,3,...,m且j≥i。
在步骤(3)中,所述的分类器参数包括症状变量联合概率p(xi,xj,y),p(xi,y)以及故障变量概率p(y),具体为:
其中n为在给定y值的情况下训练样例个数,ni为第i个症状变量的值和故障类值确定的情况下训练样例的个数,nij为第i,j个症状变量的值和故障类值确定的情况下训练样例的个数,并且c(·)为·的基值,F(·)为·的频数。
在实施例中,本发明从网络历史数据中选取了350个案例,并总结一些症状变量集为属性,一些故障类变量集为类(一条症状只对应一个故障值),详细情况如图4所示。这些症状和故障的对应关系如图5所示。图5中,A1=0和A1=1分别表示接口管理状态为正常和断开,A2=0和A2=1分别表示接口操作状态为正常和断开,A3,A4,A5,A6,A7,A8,A9,A10,这些值为0表示属性值正常,为1表示该属性值不正常。
把图5所示的350条记录网络历史数据作为测试和训练数据送入WAODE模型进行故障诊断,并与NB,AODE(如图1所示)两种分类器进行分类精度上的比较。在图6中,当丢失属性值逐渐增加时,三个分类器的分类精度逐渐下降,但在相同状态下,WAODE的分类精度始终优于NB和AODE,展示了WAODE有很好的容错能力和学习能力。
上述技术方案只是本发明的一种实施方式,对于本领域内的技术人员而言,在本发明公开了应用方法和原理的基础上,很容易做出各种类型的改进或变形,而不仅限于本发明上述具体实施方式所描述的方法,因此前面描述的方式只是优选的,而并不具有限制性的意义。
Claims (6)
1.一种网络故障诊断方法,其特征在于:所述网络故障诊断方法包括:
(1)从网络历史数据库中获取历史数据,所述历史数据包括症状变量集和故障类变量集;
(2)构建加权平均依赖分类器预测模型;
(3)所述加权平均依赖分类器预测模型通过所述历史数据自动学习到分类器参数,形成已训练完成的加权平均依赖分类器;
(4)进行故障诊断时,将测试数据输入所述已训练完成的加权平均-依赖分类器,得到对应的故障诊断结果。
2.根据权利要求1所述的网络故障诊断方法,其特征在于:所述步骤(2)中的加权平均一依赖分类器预测模型如下:
其中,t为测试数据,Y为故障类变量集,y为故障类变量的值,p(y,xi)为对应的故障类变量y和症状变量xi的联合概率,i=1,2,…,m,m为症状变量个数且F(xi)≥g,F(xi)表示xi在训练数据中的频数;另外,p(xj|y,xi)为症状变量xj和症状变量xi与故障变量y的条件概率,j=1,2,…,m,wij为症状变量xi和症状变量xj的权重。
3.根据权利要求2所述的网络故障诊断方法,其特征在于:所述g的取值为30。
4.根据权利要求3所述的网络故障诊断方法,其特征在于:所述症状变量xi和症状变量xj的权重wij如下:
其中,p(xi,xj,y)为xi和xj及y的联合概率,p(xi|y)和p(xj|y)分别为xi和xj的条件概率,i=1,2,…,m而j=2,3,…,m且j≥i。
5.根据权利要求4所述的网络故障诊断方法,其特征在于:在步骤(3)中,所述的分类器参数包括症状变量联合概率p(xi,xj,y),p(xi,y)以及故障变量概率p(y),具体为:
其中n为在给定y值的情况下训练样例个数,ni为第i个症状变量的值和故障类值确定的情况下训练样例的个数,nij为第i,j个症状变量的值和故障类值确定的情况下训练样例的个数,并且c(·)为·的基值,F(·)为·的频数。
6.根据权利要求5所述的网络故障诊断方法,其特征在于:所述步骤(4)中的所述测试数据包括症状变量集所声明的属性值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610983242.6A CN106529025B (zh) | 2016-11-09 | 2016-11-09 | 一种网络故障诊断方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610983242.6A CN106529025B (zh) | 2016-11-09 | 2016-11-09 | 一种网络故障诊断方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106529025A true CN106529025A (zh) | 2017-03-22 |
CN106529025B CN106529025B (zh) | 2019-10-18 |
Family
ID=58350899
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610983242.6A Active CN106529025B (zh) | 2016-11-09 | 2016-11-09 | 一种网络故障诊断方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106529025B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109617715A (zh) * | 2018-11-27 | 2019-04-12 | 中盈优创资讯科技有限公司 | 网络故障诊断方法、系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101917297A (zh) * | 2010-08-30 | 2010-12-15 | 烽火通信科技股份有限公司 | 基于贝叶斯网络的核心网故障诊断方法及系统 |
CN105530122A (zh) * | 2015-12-03 | 2016-04-27 | 国网江西省电力公司信息通信分公司 | 一种基于选择性隐朴素贝叶斯分类器的网络故障诊断方法 |
-
2016
- 2016-11-09 CN CN201610983242.6A patent/CN106529025B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101917297A (zh) * | 2010-08-30 | 2010-12-15 | 烽火通信科技股份有限公司 | 基于贝叶斯网络的核心网故障诊断方法及系统 |
CN105530122A (zh) * | 2015-12-03 | 2016-04-27 | 国网江西省电力公司信息通信分公司 | 一种基于选择性隐朴素贝叶斯分类器的网络故障诊断方法 |
Non-Patent Citations (3)
Title |
---|
李博: "用于Ranking的Bayesian分类器研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
王鑫 等: "加权超1-依赖贝叶斯分类器在柴油机故障诊断中的应用", 《大连海事大学学报》 * |
齐福慧: "基于关联规则的加权AODE模型的研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109617715A (zh) * | 2018-11-27 | 2019-04-12 | 中盈优创资讯科技有限公司 | 网络故障诊断方法、系统 |
Also Published As
Publication number | Publication date |
---|---|
CN106529025B (zh) | 2019-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zhang et al. | Data-core-based fuzzy min–max neural network for pattern classification | |
CN110286333B (zh) | 一种锂动力电池系统故障诊断方法 | |
CN109657797B (zh) | 基于混合诊断贝叶斯网络的故障诊断能力分析方法 | |
JP7044117B2 (ja) | モデル学習装置、モデル学習方法、及びプログラム | |
CN105530122B (zh) | 一种基于选择性隐朴素贝叶斯分类器的网络故障诊断方法 | |
CN104751229B (zh) | 一种改进bp神经网络估值的缺失数据轴承故障诊断方法 | |
CN107480895A (zh) | 一种基于Bayes增强学习的可靠消费品风险评估方法 | |
CN106950945A (zh) | 一种基于量纲可变型独立元分析模型的故障检测方法 | |
CN110188837A (zh) | 一种基于模糊神经的mvb网络故障诊断方法 | |
CN106569095B (zh) | 一种基于加权平均依赖分类器的电网故障诊断系统 | |
CN111060779A (zh) | 一种基于概率神经网络的电网分区故障诊断方法及系统 | |
CN117349595A (zh) | 一种面向工业场景的极端少样本故障诊断方法 | |
CN106529025B (zh) | 一种网络故障诊断方法 | |
CN109242008B (zh) | 一种样本类别不完备条件下的复合故障识别方法 | |
Smirnov | Intelligent decision support system for the control of complex technical systems | |
CN110990236A (zh) | 一种基于隐马尔科夫随机场的SaaS软件性能问题识别方法 | |
TWM592123U (zh) | 推論系統或產品品質異常的智能系統 | |
Wei et al. | Application of rough set and neural network in water energy utilization | |
CN116049642A (zh) | 一种故障诊断方法、系统、电子设备及计算机存储介质 | |
Smirnov | Fuzzy model of fault finding in systems of responsible appointment | |
CN115166414A (zh) | 一种电网故障监测方法及系统 | |
CN109886292B (zh) | 一种基于异常关联图的异常原因诊断方法 | |
Yazidi et al. | On distinguishing between reliable and unreliable sensors without a knowledge of the ground truth | |
CN111310907A (zh) | 一种微波组件故障诊断方法、装置及设备 | |
Armen et al. | Estimation and control of the false discovery rate of Bayesian network skeleton identification |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20190920 Address after: 264005 No. 191 Binhai Middle Road, Laishan District, Shandong, Yantai Applicant after: Shandong Institute of Business And Technology Address before: 262700, building 502, building 15, family member, Weifang Institute of science and technology, Shouguang City, Weifang, Shandong Applicant before: Xiang Zhong Liang |
|
GR01 | Patent grant | ||
GR01 | Patent grant |