CN114519095A - 数据处理方法、装置及系统、计算机存储介质 - Google Patents
数据处理方法、装置及系统、计算机存储介质 Download PDFInfo
- Publication number
- CN114519095A CN114519095A CN202011299385.8A CN202011299385A CN114519095A CN 114519095 A CN114519095 A CN 114519095A CN 202011299385 A CN202011299385 A CN 202011299385A CN 114519095 A CN114519095 A CN 114519095A
- Authority
- CN
- China
- Prior art keywords
- knowledge
- configuration
- configuration information
- graph
- knowledge graph
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000012508 change request Methods 0.000 claims description 148
- 238000000034 method Methods 0.000 claims description 92
- 230000002159 abnormal effect Effects 0.000 claims description 88
- 230000006870 function Effects 0.000 claims description 53
- 238000012545 processing Methods 0.000 claims description 48
- 238000001514 detection method Methods 0.000 claims description 47
- 238000004891 communication Methods 0.000 claims description 36
- 230000004044 response Effects 0.000 claims description 17
- 230000005856 abnormality Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 15
- 230000011218 segmentation Effects 0.000 claims description 11
- 238000012795 verification Methods 0.000 claims description 7
- 230000002547 anomalous effect Effects 0.000 claims description 3
- 238000012800 visualization Methods 0.000 abstract description 9
- 230000008569 process Effects 0.000 description 36
- 238000010586 diagram Methods 0.000 description 28
- 241000764238 Isis Species 0.000 description 9
- 230000008859 change Effects 0.000 description 9
- 238000012423 maintenance Methods 0.000 description 6
- 238000011161 development Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 239000000969 carrier Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/335—Filtering based on additional data, e.g. user or group profiles
- G06F16/337—Profile generation, learning or modification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2462—Approximate or statistical queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/36—Creation of semantic tools, e.g. ontology or thesauri
- G06F16/367—Ontology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/186—Templates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/71—Version control; Configuration management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Computer Security & Cryptography (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请公开了一种数据处理方法、装置及系统、计算机存储介质,属于网络技术领域。首先,获取目标网络设备的第一配置信息。其次,基于第一配置信息生成多个知识图谱三元组,每个知识图谱三元组包括两个知识节点以及该两个知识节点之间的关系,知识节点的类型包括功能类配置和参数类配置。然后,根据多个知识图谱三元组,生成第一配置信息对应的第一知识图谱。本申请通过知识图谱直观地反映配置信息中的知识节点以及知识节点之间的关系,实现了配置信息的可视化,提高了用户获取配置信息的效率。
Description
技术领域
本申请涉及网络技术领域,特别涉及一种数据处理方法、装置及系统、计算机存储介质。
背景技术
网络中的每个网络设备都会有自己的配置文件,配置文件通常存储在网络设备的硬盘、内存或闪存(compact flash,CF)中,用于指导网络设备按照用户的意图进行运转。
目前,网络设备的配置文件通常是以文本形式存储的,技术人员可以通过人工查询命令行的方式获取网络设备的配置信息。例如,当技术人员需要查询网络设备的某个接口承载有哪种路由协议时,可以查询该网络设备的接口配置对应的命令行。但是,通过查询命令行的方式获取网络设备的配置信息的效率较低。
发明内容
本申请提供了一种数据处理方法、装置及系统、计算机存储介质,可以解决目前获取网络设备的配置信息的效率较低的问题。
第一方面,提供了一种数据处理方法,可以应用于控制设备或网络设备。该方法包括:首先获取目标网络设备的第一配置信息。其次基于第一配置信息生成多个知识图谱三元组,每个知识图谱三元组包括两个知识节点以及两个知识节点之间的关系,知识节点的类型包括功能类配置和参数类配置。然后根据多个知识图谱三元组,生成第一配置信息对应的第一知识图谱。
本申请中,针对网络设备中采用文本形式存储的配置信息,生成该配置信息对应的知识图谱。由于知识图谱能够直观地反映配置信息中的知识节点以及知识节点之间的关系,即能够实现配置信息的可视化,当用户需要获取网络设备的配置信息时,通过查看该配置信息对应的知识图谱即可,而无需进行人工查询命令行,因此提高了用户获取配置信息的效率。
可选地,两个知识节点之间的关系为从属关系或对等关系。
可选地,第一配置信息为目标网络设备的配置文件,或者,第一配置信息为目标网络设备的配置文件中的配置块。
可选地,基于第一配置信息生成多个知识图谱三元组的实现过程,包括:对第一配置信息中的命令行进行分词处理,得到多个知识节点;根据多个知识节点生成多个知识图谱三元组。该分词处理可以是空格分词。在一些应用场景中,可以将对命令行进行空格分词后得到的单词作为知识节点。在另一些应用场景中,对命令行进行空格分词后,可以对得到的单词进行组合形成知识节点。
可选地,根据多个知识节点生成多个知识图谱三元组的实现过程,包括:根据多个知识节点在第一配置信息的命令行中的位置,确定多个知识节点之间的关系。根据多个知识节点以及多个知识节点之间的关系,生成多个知识图谱三元组。
可选地,控制设备或网络设备还可以获取知识图谱模板集合,该知识图谱模板集合包括多个知识图谱模板,每个知识图谱模板基于一个配置信息集合得到,配置信息集合包括相互之间满足相似度条件的多个配置信息。从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,第一知识图谱模板基于第一配置信息集合得到,第一配置信息集合中的多个配置信息与第一配置信息满足相似度条件。然后基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测。
本申请中,基于配置信息对应的知识图谱以及知识图谱模板,可以全面检测出功能类配置的异常和参数类配置的异常,对配置信息的异常检测的覆盖率较高。另外,无需人工参与,可以实现对配置信息的自动化异常检测,开发和维护成本较低。
可选地,配置信息为配置文件,满足相似度条件,包括:文本相似度高于第一阈值。
可选地,配置信息为配置块,满足相似度条件,包括:文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同。
可选地,第一配置信息集合中的多个配置信息来自多个网络设备,多个网络设备属于目标网络设备所在的网络,或者属于与目标网络设备所在的网络的网络类型相同的其它网络。
可选地,当第一配置信息为配置文件,满足相似度条件包括文本相似度高于第一阈值;或者,第一配置信息为配置块,满足相似度条件包括文本相似度高于第二阈值,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板的实现过程,包括:将知识图谱模板集合中与第一知识图谱的图谱相似度最高的知识图谱模板确定为第一知识图谱模板。
可选地,当第一配置信息为配置块,满足相似度条件包括配置对象类型相同和/或配置对象相同,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板的实现过程,包括:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板。
可选地,获取知识图谱模板集合的实现过程,包括:获取多个配置信息集合;基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。或者也可以接收来自其它设备的知识图谱模板集合。
可选地,基于多个配置信息集合分别生成多个知识图谱模板的实现过程,包括:对每个配置信息集合,生成配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据多个知识图谱确定配置信息集合对应的知识图谱模板。
可选地,知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,根据多个知识图谱确定配置信息集合对应的知识图谱模板的实现过程,包括:根据多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为目标参数类配置的知识节点模板的置信区间。
可选地,基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测的实现过程,包括:当第一知识图谱相对于第一知识图谱模板,存在多余的或缺失的知识节点时,确定第一配置信息存在配置异常。
可选地,第一知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测的实现过程,包括:将第一知识图谱上的目标知识节点确定为异常知识节点,目标知识节点的类型为参数类配置,且目标知识节点的参数值超出目标知识节点模板的置信区间,目标知识节点模板为目标知识节点在第一知识图谱模板上对应的知识节点模板。
可选地,当第一配置信息存在配置异常时,在第一知识图谱上标识出异常知识节点。
本申请中,控制设备或网络设备在知识图谱上标识出异常知识节点之后,可以将标识有异常知识节点的知识图谱发送给OSS或其它终端设备,供OSS或终端设备显示。当然,若控制设备或网络设备自身具有显示功能,则也可以直接在自身的显示界面上显示该标识有异常知识节点的知识图谱,以提示技术人员配置信息存在配置异常。本申请通过知识图谱直观地显示异常知识节点,即能够直观地显示异常配置信息,便于技术人员快速获取异常配置信息并提出解决方案,提高维护效率。
可选地,将在多个知识图谱中出现次数大于第一阈值的知识节点的类型确定为功能类配置;将在多个知识图谱中出现次数小于第二阈值的知识节点的类型确定为参数类配置;其中,第一阈值大于或等于第二阈值。
由于网络中的功能类配置是比较固定的,参数类配置是比较多变的,因此可以根据知识节点的链接热度(出现次数)来区分知识节点的类型为功能类配置还是参数类配置。
可选地,当接收到针对第一配置信息的配置变更请求时,基于配置变更请求对第一知识图谱进行更新,得到第二知识图谱。从知识图谱模板集合中获取第二知识图谱对应的第二知识图谱模板,知识图谱模板集合包括多个知识图谱模板,每个知识图谱模板基于一个配置信息集合得到,配置信息集合包括相互之间满足相似度条件的多个配置信息。基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常。
在一种实现方式中,当第一配置信息为配置文件,满足相似度条件包括文本相似度高于第一阈值;或者,第一配置信息为配置块,满足相似度条件包括文本相似度高于第二阈值,从知识图谱模板集合中获取第二知识图谱对应的第二知识图谱模板的实现过程,包括:将知识图谱模板集合中与第二知识图谱的图谱相似度最高的知识图谱模板确定为第二知识图谱模板。
在该实现方式中,基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常的实现过程,包括:当第二知识图谱模板与第二知识图谱的图谱相似度低于第三阈值时,确定配置变更请求异常。
在另一种实现方式中,当第一配置信息为配置块,满足相似度条件包括配置对象类型相同和/或配置对象相同,从知识图谱模板集合中获取第二知识图谱对应的第二知识图谱模板的实现过程,包括:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,并将第一知识图谱模板作为第二知识图谱模板。
在该实现方式中,基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常,包括:当第二知识图谱上基于配置变更请求更改的知识节点相对于第二知识图谱模板异常时,确定配置变更请求异常。
可选地,响应于配置变更请求正常,基于配置变更请求更新第一配置信息,得到第二配置信息;或者,响应于配置变更请求异常,输出针对配置变更请求的异常告警。
本申请中,网络设备或控制设备在接收到配置变更请求后,先基于该配置变更请求更新知识图谱,基于更新后的知识图谱以及对应的知识图谱模板验证该配置变更请求是否异常,在确认配置变更请求正常后再基于该配置变更请求更新配置信息,而非直接更新配置信息,可以降低由于配置变更异常而导致的网络事故风险,提高网络运行可靠性。
第二方面,提供了一种数据处理方法,可以应用于控制设备或网络设备。该方法包括:先获取多个配置信息集合,每个配置信息集合包括相互之间满足相似度条件的多个配置信息。然后基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。
本申请中,通过学习通信网络中的网络设备的配置文件,生成多个知识图谱模板,该知识图谱模板能够反映一类配置信息的通用内容,可以作为对该类配置信息进行异常检测的基础。另外,采用知识图谱的形式替代文本的形式对网络设备的配置信息进行存储、描述、展示、添加和/或删除,可以实现配置信息的可视化。
可选地,基于多个配置信息集合分别生成多个知识图谱模板的实现过程,包括:对每个配置信息集合,生成配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据多个知识图谱确定配置信息集合对应的知识图谱模板。
可选地,知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,根据多个知识图谱确定配置信息集合对应的知识图谱模板的实现过程,包括:根据多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为目标参数类配置的知识节点模板的置信区间。
可选地,配置信息为配置文件,获取配置信息集合的实现过程,包括:对来自多个网络设备的配置文件进行分类,得到多个配置信息集合,每个配置信息集合包括相互之间文本相似度高于第一阈值的多个配置文件。
可选地,配置信息为配置块,获取配置信息集合的实现过程,包括:对来自一个或多个网络设备的配置块进行分类,得到多个配置信息集合,每个配置信息集合包括相互之间文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同的多个配置块。
第三方面,提供了一种数据处理装置。所述装置包括多个功能模块,所述多个功能模块相互作用,实现上述第一方面及其各实施方式中的方法。所述多个功能模块可以基于软件、硬件或软件和硬件的结合实现,且所述多个功能模块可以基于具体实现进行任意组合或分割。
第四方面,提供了一种数据处理装置。所述装置包括多个功能模块,所述多个功能模块相互作用,实现上述第二方面及其各实施方式中的方法。所述多个功能模块可以基于软件、硬件或软件和硬件的结合实现,且所述多个功能模块可以基于具体实现进行任意组合或分割。
第五方面,提供了一种数据处理系统,包括:控制设备和通信网络中的网络设备。网络设备用于向控制设备发送网络设备的配置文件。控制设备用于根据通信网络中的网络设备的配置文件,获取多个配置信息集合,每个配置信息集合包括相互之间满足相似度条件的多个配置信息。控制设备还用于基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。
在一种实现方式中,控制设备还用于向网络设备发送知识图谱模板集合。网络设备还用于根据网络设备的配置信息对应的知识图谱模板以及网络设备的配置信息对应的知识图谱,对网络设备的配置信息进行异常检测;和/或,在接收到针对网络设备的配置信息的配置变更请求后,更新网络设备的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及更新后的知识图谱,验证配置变更请求是否异常。
在该实现方式中,网络设备还用于响应于配置变更请求正常,基于配置变更请求更新网络设备的配置信息,或者,响应于配置变更请求异常,向控制设备发送针对配置变更请求的异常告警。控制设备还用于在接收到针对配置变更请求的异常告警后,显示异常告警的告警内容。
在另一种实现方式中,控制设备还用于根据网络设备的配置信息对应的知识图谱模板以及网络设备的配置信息对应的知识图谱,对网络设备的配置信息进行异常检测;和/或,在接收到针对网络设备的配置信息的配置变更请求后,更新网络设备的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及更新后的知识图谱,验证配置变更请求是否异常。
在该实现方式中,控制设备还用于响应于配置变更请求正常,向网络设备发送更新指示,更新指示用于指示网络设备基于配置变更请求更新网络设备的配置信息;或者,控制设备还用于响应于配置变更请求异常,显示针对配置变更请求的告警内容。
第六方面,提供了一种数据处理装置,包括:处理器和存储器;
所述存储器,用于存储计算机程序,所述计算机程序包括程序指令;
所述处理器,用于调用所述计算机程序,实现上述第一方面及其各实施方式或第二方面及其各实施方式中的方法。
第七方面,提供了一种计算机存储介质,所述计算机存储介质上存储有指令,当所述指令被计算机设备的处理器执行时,实现上述第一方面及其各实施方式或第二方面及其各实施方式中的方法。
第八方面,提供了一种芯片,芯片包括可编程逻辑电路和/或程序指令,当芯片运行时,实现上述第一方面及其各实施方式或第二方面及其各实施方式中的方法。。
本申请提供的技术方案带来的有益效果至少包括:
针对网络设备中采用文本形式存储的配置信息,生成该配置信息对应的知识图谱。由于知识图谱能够直观地反映配置信息中的知识节点以及知识节点之间的关系,即能够实现配置信息的可视化,当用户需要获取网络设备的配置信息时,通过查看该配置信息对应的知识图谱即可,而无需进行人工查询命令行,因此提高了用户获取配置信息的效率。
通过学习通信网络中的网络设备的配置文件,生成多个知识图谱模板,该知识图谱模板能够反映一类配置信息的通用内容,可以作为对该类配置信息进行异常检测的基础。另外,采用知识图谱的形式替代文本的形式对网络设备的配置信息进行存储、描述、展示、添加和/或删除,可以实现配置信息的可视化。
基于配置信息对应的知识图谱以及知识图谱模板,可以全面检测出功能类配置的异常和参数类配置的异常,对配置信息的异常检测的覆盖率较高。另外,无需人工参与,可以实现对配置信息的自动化异常检测,开发和维护成本较低。进一步地,通过知识图谱直观地显示异常知识节点,即能够直观地显示异常配置信息,便于技术人员快速获取异常配置信息并提出解决方案,提高维护效率。
网络设备或控制设备在接收到配置变更请求后,先基于该配置变更请求更新知识图谱,基于更新后的知识图谱以及对应的知识图谱模板验证该配置变更请求是否异常,在确认配置变更请求正常后再基于该配置变更请求更新配置信息,而非直接更新配置信息,可以降低由于配置变更异常而导致的网络事故风险,提高网络运行可靠性。
附图说明
图1是本申请实施例提供的数据处理系统的结构示意图;
图2是本申请实施例提供的一种数据处理系统的应用场景示意图;
图3是本申请实施例提供的另一种数据处理系统的应用场景示意图;
图4是本申请实施例提供的一种数据处理方法的流程示意图;
图5是本申请实施例提供的一种知识图谱三元组的结构示意图;
图6是本申请实施例提供的一种知识图谱的结构示意图;
图7是本申请实施例提供的一种知识图谱模板的结构示意图;
图8是本申请实施例提供的另一种数据处理方法的流程示意图;
图9是本申请实施例提供的另一种知识图谱的结构示意图;
图10是本申请实施例提供的一种对配置信息进行异常检测的实现过程示意图;
图11是本申请实施例提供的一种标识有异常知识节点的知识图谱的结构示意图;
图12是本申请实施例提供的一种验证配置变更请求的实现过程示意图;
图13是本申请实施例提供的一种数据处理装置的结构示意图;
图14是本申请实施例提供的另一种数据处理装置的结构示意图;
图15是本申请实施例提供的又一种数据处理装置的结构示意图;
图16是本申请实施例提供的再一种数据处理装置的结构示意图;
图17是本申请实施例提供的还一种数据处理装置的结构示意图;
图18是本申请另一实施例提供的一种数据处理装置的结构示意图;
图19是本申请又一实施例提供的一种数据处理装置的结构示意图;
图20是本申请实施例提供的一种数据处理装置的框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
为了便于读者对本申请方案的理解,首先对本申请涉及的一些名词进行解释。
1、知识图谱:是显示知识发展进程和结构关系的一系列各种不同的图形。知识图谱实现了用可视化技术描述知识资源及其载体,挖掘、分析、构建、绘制和显示知识以及它们之间的相互联系。
2、配置文件:是一种计算机文件,用于存储计算机程序的配置参数和初始设置。计算机程序在首次加载时或者运行过程中会读取配置文件中的参数,以指导自身按照特定意图运转。在数通领域,配置文件特指路由器、交换机和防火墙等数通设备的配置文件(可简称为:数通配置文件),用于存储这些数通设备的运行参数。数通配置文件一般是以文本形式存储的。
3、配置块:配置文件可以被分割成很多配置块,一个配置块就是一个特定功能模块的配置信息。比如在数通领域,有开放式最短路径优先(open shortest path first,OSPF)配置块、边界网关协议(Border Gateway Protocol,BGP)配置块和接口配置块等。
4、功能类配置:用于标识一个功能使能或者关闭的配置项。比如接口配置块下的“ip-address 192.168.1.10”配置中的“ip-address”就是功能类配置,表示该接口下配置了互联网协议(Internet Protocol,IP)地址。在一个网络中,功能类配置是比较固定的,比如大部分接口配置块下都会配置“ip-address”。
5、参数类配置:用于记录一个配置功能的具体参数。比如接口配置块下的“ip-address192.168.1.10”配置中的“192.168.1.10”就是一个参数类配置,用于记录该接口下具体配置的IP地址值。在一个网络中,参数类配置是比较多变的,比如大部分接口下配置的IP地址都不一样,而“192.168.1.10”这个具体的参数类配置可能只会出现一次。
本申请实施例提供了一种数据处理方法,针对网络设备中采用文本形式存储的配置信息,生成该配置信息对应的知识图谱。由于知识图谱能够直观地反映配置信息中的知识节点以及知识节点之间的关系,即能够实现配置信息的可视化,当用户需要获取网络设备的配置信息时,通过查看该配置信息对应的知识图谱即可,而无需进行人工查询命令行,因此提高了用户获取配置信息的效率。本申请实施例中的配置信息可以指配置文件或配置文件中的配置块,即网络设备的配置信息对应的知识图谱可以是配置文件对应的知识图谱,或者,可以是配置块对应的知识图谱。
可选地,图1是本申请实施例提供的数据处理系统的结构示意图。如图1所示,该数据处理系统包括控制设备101以及通信网络中的网络设备102a-102c(统称为网络设备102)。图中控制设备和网络设备的数量仅用作示意,不作为对本申请实施例提供的数据处理系统的限制。本申请实施例涉及的通信网络的网络配置一致性较高。例如该通信网络可以是数据中心网络(data center network,DCN)、无线接入网(radio access network,RAN)、分组传送网(packet transport network,PTN)、城域网络、广域网络、园区网络、虚拟局域网(virtual local area network,VLAN)或虚拟扩展局域网(virtual extensiblelocal area network,VXLAN)等本申请实施例对通信网络的类型不做限定。
控制设备101可以是网络控制器,网络管理设备,网关或其它具有控制能力的设备,控制设备101可以是一台或多台设备。或者,控制设备101也可以是一台服务器,或者由若干台服务器组成的服务器集群,或者是一个云计算服务中心。网络设备102可以是路由器、交换机、防火墙或接入网设备等数通设备。其中,接入网设备包括光线路终端(opticalline terminal,OLT)和光网络单元(optical network unit,ONU)等。控制设备101用于管理和控制通信网络中的网络设备102。控制设备101与网络设备102之间通过有线网络或无线网络连接。
在如图1所示的数据处理系统中,网络设备102用于向控制设备101发送该网络设备102的配置文件。控制设备101用于根据通信网络中的网络设备101的配置文件,获取多个配置信息集合,每个配置信息集合包括相互之间满足相似度条件的多个配置信息。控制设备101还用于基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,该知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。可选地,控制设备101用于对每个配置信息集合,生成该配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据该多个知识图谱确定该配置信息集合对应的知识图谱模板。
在第一种实现方式中:
控制设备101还用于向网络设备102发送知识图谱模板集合。网络设备102还用于根据该网络设备102的配置信息对应的知识图谱模板以及该网络设备102的配置信息对应的知识图谱,对该网络设备102的配置信息进行异常检测。和/或,网络设备102还用于在接收到针对该网络设备102的配置信息的配置变更请求后,更新该网络设备102的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及该更新后的知识图谱,验证该配置变更请求是否异常。
可选地,网络设备102还用于响应于该配置变更请求正常,基于该配置变更请求更新网络设备的配置信息,或者,响应于该配置变更请求异常,向控制设备101发送针对该配置变更请求的异常告警。控制设备101还用于在接收到针对配置变更请求的异常告警后,显示该异常告警的告警内容。
示例地,图2是本申请实施例提供的一种数据处理系统的应用场景示意图。如图2所示,控制设备101包括配置采集模块1011A、知识图谱学习模块1012A、知识图谱存储模块1013A、知识图谱管理模块1014A、知识图谱下发模块1015A和配置告警模块1016A。网络设备102包括配置异常检测模块1021。其中,配置采集模块1011A用于定时收集通信网络中的网络设备102的配置文件。知识图谱学习模块1012A用于训练得到全网的知识图谱模板以及学习各个网络设备对应的最新知识图谱。知识图谱存储模块1013A用于存储全网的知识图谱模板以及各个网络设备对应的最新知识图谱。知识图谱管理模块1014A用于提供知识图谱的增删改查功能,以使用户能够直观地以知识图谱的形式查阅全网任意网络设备的配置信息。知识图谱下发模块1015A用于向网络设备102发送全网的知识图谱模板。网络设备102的配置异常检测模块1021用于根据对应的知识图谱模板,对网络设备的配置信息和/或针对网络设备的配置信息的配置变更请求进行异常检测,若存在异常,则向控制设备101上报异常告警。配置告警模块1016A用于接收全网的异常告警,并采用知识图谱的形式直观展示告警内容。
第一种实现方式实际涵盖了以下两种情况:
第一种情况,控制设备101向网络设备102发送知识图谱模板集合。网络设备102根据该网络设备102的配置信息对应的知识图谱模板以及该网络设备102的配置信息对应的知识图谱,对该网络设备102的配置信息进行异常检测。
第二种情况,控制设备101向网络设备102发送知识图谱模板集合。网络设备102在接收到针对该网络设备102的配置信息的配置变更请求后,更新该网络设备102的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及该更新后的知识图谱,验证该配置变更请求是否异常。
在第二种实现方式中:
控制设备101还用于根据网络设备102的配置信息对应的知识图谱模板以及该网络设备102的配置信息对应的知识图谱,对网络设备102的配置信息进行异常检测。和/或,控制设备101还用于在接收到针对网络设备102的配置信息的配置变更请求后,更新网络设备102的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及该更新后的知识图谱,验证该配置变更请求是否异常。
可选地,控制设备101还用于响应于配置变更请求正常,向网络设备102发送更新指示,该更新指示用于指示网络设备102基于该配置变更请求更新该网络设备102的配置信息。或者,控制设备101还用于响应于配置变更请求异常,显示针对该配置变更请求的告警内容。
示例地,图3是本申请实施例提供的另一种数据处理系统的应用场景示意图。如图3所示,控制设备101包括配置采集模块1011B、知识图谱学习模块1012B、知识图谱存储模块1013B、知识图谱管理模块1014B、配置变更拦截模块1015B、配置异常检测模块1016B和配置下发模块1017B。其中,配置采集模块1011B用于定时收集通信网络中的网络设备102的配置文件。知识图谱学习模块1012B用于训练得到全网的知识图谱模板以及学习各个网络设备对应的最新知识图谱。知识图谱存储模块1013B用于存储全网的知识图谱模板以及各个网络设备对应的最新知识图谱。知识图谱管理模块1014B用于提供知识图谱的增删改查功能,以使用户能够直观地以知识图谱的形式查阅全网任意网络设备的配置信息。配置变更拦截模块1015B用于自动拦截全网的配置变更请求。配置异常检测模块1016用于根据对应的知识图谱模板,对网络设备102的配置信息和/或配置变更请求进行异常检测。配置下发模块1017B用于向相关网络设备下发更新指示,以指示相关网络设备基于配置变更请求更新配置信息。
第二种实现方式实际涵盖了以下两种情况:
第三种情况,控制设备101根据网络设备102的配置信息对应的知识图谱模板以及该网络设备102的配置信息对应的知识图谱,对网络设备102的配置信息进行异常检测。这种情况下,网络设备102需要将最新的配置信息发送控制设备101,供控制设备进行异常检测。
第四种情况,控制设备101在接收到针对网络设备102的配置信息的配置变更请求后,更新网络设备102的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及该更新后的知识图谱,验证该配置变更请求是否异常。
本申请实施例提供的以上四种情况可以采用不同的组合方式,第一种情况和第三种情况中的任一种情况可以跟第二种情况和第四种情况中的任一种情况组合实现,具体包括:第一种情况与第二种情况组合实现,或者,第一种情况与第四种情况组合实现,或者,第二种情况与第三种情况组合实现,或者,第三种情况与第四种情况组合实现。
可选地,当针对网络设备102的配置信息的配置变更请求由管理员直接登录网络设备102发起或由管理员通过其它设备定向发送给网络设备102时,通常采用上述第二种情况对配置变更请求进行验证。当针对网络设备102的配置信息的配置变更请求用于意图变更、网络改造和/或安全整改时,由于这种配置变更请求通常是针对一类网络设备的,因此可以由控制设备对配置变更请求进行统一验证,即采样上述第四种情况对配置变更请求进行验证,以提高验证效率并节约网络设备的处理资源。
本申请采用以下四个实施例,分别对控制设备生成知识图谱模板的实现过程,控制设备和/或通信网络中的目标网络设备生成目标网络设备的配置信息对应的知识图谱的实现过程,控制设备和/或通信网络中的目标网络设备对目标网络设备的配置信息进行异常检测的实现过程,以及控制设备和/或通信网络中的目标网络设备验证针对目标网络设备的配置信息的配置变更请求的实现过程进行说明。其中,目标网络设备为通信网络中的任一网络设备。
本申请的第一个实施例提供了一种数据处理方法,该数据处理方法用于生成知识图谱模板。可选地,图4是本申请实施例提供的一种数据处理方法的流程示意图。该方法可以应用于如图1至图3任一所示的数据处理系统中的控制设备101。如图4所示,该方法包括:
步骤401、获取多个配置信息集合。
每个配置信息集合包括相互之间满足相似度条件的多个配置信息。若配置信息为配置文件,则满足相似度条件,包括:文本相似度高于第一阈值。若配置信息为配置块,则满足相似度条件,包括:文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同。可选地,配置对象类型包括OSPF类、BGP类和接口类等。
在本申请的第一个可选实施例中,配置信息为配置文件。控制设备在接收到来自多个网络设备的多个配置文件后,对该多个配置文件进行分类,得到多个配置信息集合。每个配置信息集合包括相互之间文本相似度高于第一阈值的多个配置文件。
可选地,控制设备采用聚类算法基于文本相似度对多个配置文件进行分类,得到多个配置信息集合。
在本申请的第二个可选实施例中,配置信息为配置块。控制设备在接收到来自一个或多个网络设备的配置文件后,获取配置文件中的多个配置块,然后对该多个配置块进行分类,得到多个配置信息集合。每个配置信息集合包括相互之间文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同的多个配置块。
可选地,控制设备采用聚类算法基于文本相似度对多个配置块进行分类,得到多个配置信息集合。或者,控制设备将配置对象类型相同的多个配置块作为一个配置信息集合。又或者,控制设备将配置对象相同的多个配置块作为一个配置信息集合。
示例地,以下分别示出了4个配置块的文本内容。其中第一个配置块为OSPF配置块,第二个配置块、第三个配置块和第四个配置块均为接口配置块。
第一个配置块(ospf 65534)的文本内容:
#
ospf 65534vpn-instance_dcn_vpn_
opaque-capability enable
hostname
vpn-instance-capability simple
area 0.0.0.0
network 0.0.0.0 255.255.255.255
#
第二个配置块(interface Eth-Trunk2)的文本内容:
#
interface Eth-Trunk2
description TO-IH04_6437_C0AB31_CX600-X16_A2-Eth-Trunk2
ip-address 172.16.1.185 255.255.255.252
isis enable 10000
isis circuit-type p2p
isis authentication-mode md5 cipher%^%#v;*7A{lXJ7"8#kI19Fc#8ZXJTwq]g;DgSf!f.x|M%^%#
isis ldp-sync
isis timer ldp-sync hold-max-cost infinite
mpls
mpls te
mpls rsvp-te
mpls rsvp-te hello
mpls ldp
mode lacp-static
qos phb disable
statistic enable
#
第三个配置块(interface Eth-Trunk2.1)的文本内容:
#
interface Eth-Trunk2.1
vlan-type dot1q 1
description To-IH04_6437_C0AB31_CX600-X8_A2-XGE2/0/0.1-10GE
ip-address 172.17.64.1 255.255.255.252
isis enable 1001
isis circuit-type p2p
isis authentication-mode md5 cipher%^%#"YpH2kN4,H!Nh_VIEOvJ/+x5BRQ!H$=i<{";kJ_.%^%#
isis cost 500
mpls
mpls te
mpls rsvp-te
mpls rsvp-te hello
trust upstream default
qos phb disable
#
第四个配置块(interface Aux0/0/1)的文本内容:
#
interface Aux0/0/1
link-protocol ppp
undo shutdown
#
例如,控制设备采用聚类算法基于文本相似度对上述4个配置块进行分类,可以将该4个配置块分至3个配置信息集合,第一个配置信息集合包括第一个配置块,第二个配置信息集合包括第二个配置块和第三个配置块,第三个配置信息集合包括第四个配置块。又例如,控制设备基于配置对象类型对上述4个配置块进行分类,可以将该4个配置块分至2个配置信息集合,第一个配置信息集合包括第一个配置块(OSPF配置块),第二个配置信息集合包括第二个配置块、第三个配置块和第四个配置块这三个接口配置块。又例如,控制设备基于配置对象对上述4个配置块进行分类,由于这4个配置块的配置对象均不同,因此可以将该4个配置块分至4个配置信息集合。
在上述两种实现方式中,控制设备可以接收来自多个网络设备的多个配置文件,该多个网络设备可以属于同一网络,或者也可以属于网络类型相同的不同网络,本申请实施例对此不做限定。
可选地,控制设备可以周期性地采集多个网络设备的配置文件。或者,当网络设备的配置文件更新时,网络设备主动向控制设备上报更新后的配置文件。
步骤402、基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合。
每个知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。其中,功能类配置可以是属性名,参数类配置可以是属性值。例如,配置信息中的“ip-address 192.168.1.10”中的“ip-address”为属性名,其为功能类配置;“192.168.1.10”为属性值,其为参数类配置。为了便于区分,本申请实施例中将知识图谱模板上的知识节点称为知识节点模板,知识节点模板实质上也是知识节点。
由于网络中的功能类配置是比较固定的,参数类配置是比较多变的,因此可以根据知识节点的链接热度(出现次数)来区分知识节点的类型为功能类配置还是参数类配置。具体可以将在多个知识图谱中出现次数大于第一阈值的知识节点的类型确定为功能类配置;将在多个知识图谱中出现次数小于第二阈值的知识节点的类型确定为参数类配置。其中,第一阈值大于或等于第二阈值。
本申请实施例中,控制设备可以学习全网的海量配置文件,以生成大量知识图谱。知识图谱在不断迭代更新的过程中,知识节点的链接热度会逐渐分化,参数类配置(例如IP地址值)由于出现次数较少,链接热度较低,而功能类配置(例如IP地址名)由于出现次数较多,链接热度较高,因此可以实现对知识节点的类型的有效区分。
可选地,步骤402的实现过程包括:对每个配置信息集合,控制设备生成该配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据该多个知识图谱确定该配置信息集合对应的知识图谱模板。也即是,控制设备生成配置信息集合中的每个配置信息对应的一个知识图谱,然后根据该配置信息集合中的多个配置信息对应的多个知识图谱来得到一个知识图谱模板。
可选地,控制设备生成配置信息对应的知识图谱的实现过程包括以下步骤S1至步骤S2:
在步骤S1中,控制设备基于配置信息生成多个知识图谱三元组。
其中,每个知识图谱三元组包括两个知识节点以及该两个知识节点之间的关系。
可选地,控制设备基于配置信息生成多个知识图谱三元组的实现过程,包括:控制设备对配置信息中的命令行进行分词处理,得到多个知识节点,并根据该多个知识节点生成多个知识图谱三元组。
示例地,控制设备可以对配置信息中的命令行进行空格分词,得到多个单词,然后根据该多个单词得到多个知识节点。在一些应用场景中,控制设备可以将对命令行进行空格分词后得到的单词作为知识节点。例如,命令行的内容包括“ip-address192.168.1.10”,空格分词后得到的单词包括“ip-address”和“192.168.1.10”,控制设备可以将这两个单词分别作为一个知识节点。在另一些应用场景中,控制设备对命令行进行空格分词后,可以对得到的单词进行组合形成知识节点。例如,命令行的内容包括“ipaddress 192.168.1.10”,空格分词后得到的单词包括“ip”、“address”和“192.168.1.10”,控制设备将“ip”和“address”组合形成知识节点“ip address”,并将“192.168.1.10”作为另一个知识节点。当然,采用空格分词算法还有可能将一个知识节点分成三个、四个或更多的单词,本申请实施例对如何对分词得到的单词进行组合得到知识节点的方式不做限定。
或者,控制设备也可以采用正则表达式提取配置信息的命令行中的知识节点。例如,IP地址值的格式是x.x.x.x,控制设备可以采用正则表达式去匹配命令行中这种格式的内容,并将匹配到的内容作为IP地址值。本申请实施例对控制设备从配置信息中提取知识节点的方式不做限定。
可选地,两个知识节点之间的关系为从属关系或对等关系。同一个命令行中相邻的两个知识节点之间通常为从属关系,不同命令行的第一个知识节点之间通常为对等关系。知识图谱上可能会体现两个知识节点之间的对等关系,也可能不体现两个知识节点之间的对等关系。可选地,控制设备根据多个知识节点生成多个知识图谱三元组的实现过程,包括:控制设备根据多个知识节点在配置信息的命令行中的位置,确定该多个知识节点之间的关系;然后根据该多个知识节点以及该多个知识节点之间的关系,生成多个知识图谱三元组。
示例地,基于上述步骤401中的第一个配置块(ospf 65534)的文本内容的最后一个命令行“network 0.0.0.0 255.255.255.255”,可以得到如图5所示的两个知识图谱三元组(两种虚线框中分别包括一个知识图谱三元组),其中,知识节点“network-0.0.0.0”从属于知识节点“network(网络)”,知识节点“0.0.0.0-255.255.255.255”从属于知识节点“network-0.0.0.0”。参见图5,从属知识节点可以携带所属知识节点的内容,便于用户查看和理解。当然,从属知识节点也可以仅携带自身的内容,即图5中的知识节点“network-0.0.0.0”可以采用“0.0.0.0”表示,知识节点“0.0.0.0-255.255.255.255”可以采用“255.255.255.255”表示。
在步骤S2中,控制设备根据多个知识图谱三元组生成该配置信息对应的知识图谱。
示例地,基于上述步骤401中的第一个配置块(ospf 65534)的文本内容,可以得到如图6所示的知识图谱,即该知识图谱为ospf 65534配置块对应的知识图谱。该知识图谱包括从属“ospf 65534”的5个知识节点:“opaque-capability(特殊算路能力)”、“hostname(主机名称)”、“vpn-instance-capability(VPN实例能力)”、“area(区域)”和“network(网络)”,从属“opaque-capability”的知识节点:“opaque-capability-enable(使能特殊算路能力)”,从属“vpn-instance-capability”的知识节点:“vpn-instance-capability-simple(简化的VPN实例能力)”,从属“area”的知识节点:“area-0.0.0.0”,从属“network”的知识节点:“network-0.0.0.0”,以及从属“network-0.0.0.0”的知识节点:“0.0.0.0-255.255.255.255”。该知识图谱中仅示出了知识节点之间的从属关系。
本申请实施例中,控制设备根据一个配置信息集合中的多个配置信息对应的多个知识图谱得到一个知识图谱模板,该知识图谱模板能够反映一类配置信息包含的内容。例如,接口配置块均包括为接口配置的IP地址,因此接口配置块对应的知识图谱模板包括IP地址的功能类配置(IP地址名)和参数类配置(IP地址值)。
可选地,知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,控制设备可以根据属于同一配置信息集合的多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为该目标参数类配置的知识节点模板的置信区间。
例如,参考步骤401中示出的配置块的文本内容,其中,第二个配置块包括为接口配置IP地址的命令行:“ip-address 172.16.1.185 255.255.255.252”,第三个配置块包括为接口配置IP地址的命令行:“ip-address 172.17.64.1 255.255.255.252”,“172.16.1.185”和“172.17.64.1”为从属相同功能类配置“ip-address”的参数类配置“IPv4地址”的参数值(即具体IPv4地址值)。
本申请实施例中,控制设备可以对一个配置信息集合中的多个配置信息对应的多个知识图谱中,从属相同功能类配置的参数类配置的参数值进行统计,得到该参数类配置的参数值集合,然后基于该参数值集合确定该参数类配置的置信区间。例如,控制设备统计得到的接口配置块的IP地址值包括“172.16.1.185”和“172.17.64.1”,控制设备可以确定该接口配置块的IP地址的置信区间为172.0.0.0至255.255.255.252。
示例地,图7是本申请实施例提供的一种知识图谱模板的结构示意图。该知识图谱模板为通信网络中的ospf100配置块对应的知识图谱模板,该通信网络中的网络设备的ospf100配置块基本都符合该知识图谱模板。如图7所示,该知识图谱模板包括从属“ospf100”的4个知识节点:“default-route-advertise(默认路由公告)”、“network(网络)”、“import-route(路由引入)”和“area(区域)”,从属“network”的知识节点:“network-IPv4”,从属“network-IPv4”的知识节点:“IPv4-IPv4”,从属“import-route”的2个知识节点:“import-route-static(静态路由引入)”和“import-route-direct(直连路由引入)”,以及从属“area”的知识节点:“area-IPv4”。其中的IPv4均属于参数类配置,分别对应有各自的置信区间。
可选地,控制设备在生成配置信息集合对应的知识图谱模板之后,可以将该知识图谱模板发送给运维支撑系统(operations support system,OSS)或其它与控制设备连接的终端设备,供OSS或终端设备显示。当然,若控制设备自身具有显示功能,则控制设备也可以直接在自身的显示界面上显示各个配置信息集合对应的知识图谱模板。以供用户在对知识图谱模板进行增删改查。控制设备在生成知识图谱模板之后,还可以在控制设备中或与控制设备连接的存储设备中存储该知识图谱模板,以便后续使用。例如知识图谱模板可以作为对网络设备的配置信息进行异常检测的基础等。
可选地,当上述知识图谱模板为配置块对应的知识图谱模板时,本实施例中的数据处理方法也可以由网络设备执行,网络设备根据自身的配置文件,生成多个配置信息集合,每个配置信息集合中包括相互之间满足相似度条件的多个配置块,然后根据该多个配置块生成一类配置块对应的知识图谱模板。本申请实施例以控制设备生成知识图谱模板为例进行说明。
综上所述,在本申请实施例提供的数据处理方法中,控制设备通过学习通信网络中的网络设备的配置文件,生成多个知识图谱模板,该知识图谱模板能够反映一类配置信息的通用内容,可以作为对该类配置信息进行异常检测的基础。另外,控制设备采用知识图谱的形式替代文本的形式对网络设备的配置信息进行存储、描述、展示、添加和/或删除,可以实现配置信息的可视化。
本申请的第二个实施例提供了另一种数据处理方法,该数据处理方法用于生成目标网络设备的配置信息对应的知识图谱。可选地,图8是本申请实施例提供的另一种数据处理方法的流程示意图。该方法可以应用于如图1至图3任一所示的数据处理系统中的控制设备101或网络设备102。如图8所示,该方法包括:
步骤801、获取目标网络设备的第一配置信息。
可选地,第一配置信息为目标网络设备的配置文件。或者,第一配置信息为目标网络设备的配置文件中的配置块,该第一配置信息可以是目标网络设备的配置文件中的任一配置块。
示例地,第一配置信息为ospf100配置块。该ospf100配置块的文本内容如下:
#
ospf100 vpn-instance_dcn_vpn_
network 0.0.0.0 255.255.255.255
import-route static
import-route direct
area 0.0.0.0
#
步骤802、基于第一配置信息生成多个知识图谱三元组。
每个知识图谱三元组包括两个知识节点以及该两个知识节点之间的关系,知识节点的类型包括功能类配置和参数类配置。可选地,步骤802的实现过程包括:对第一配置信息中的命令行进行分词处理,得到多个知识节点;根据该多个知识节点生成多个知识图谱三元组。具体可以根据多个知识节点在第一配置信息的命令行中的位置,确定多个知识节点之间的关系;然后根据多个知识节点以及该多个知识节点之间的关系,生成多个知识图谱三元组。
此步骤的实现方式可参考上述步骤402中的步骤S1中:控制设备基于配置信息生成多个知识图谱三元组的实现过程,本申请实施例在此不再赘述。
步骤803、根据多个知识图谱三元组,生成第一配置信息对应的第一知识图谱。
示例地,参考步骤801中的ospf100配置块的文本内容,可以得到如图9所示的知识图谱。该知识图谱包括从属“ospf100”的3个知识节点:“network(网络)”、“import-route(路由引入)”和“area(区域)”,从属“network”的知识节点:“network-0.0.0.0”,从属“network-0.0.0.0”的知识节点:“0.0.0.0-255.255.255.255”,从属“import-route”的2个知识节点:“import-route-static(静态路由引入)”和“import-route-direct(直连路由引入)”,以及从属“area”的知识节点:“area-0.0.0.0”。
可选地,控制设备或网络设备在生成网络设备的配置信息对应的知识图谱之后,可以将该知识图谱发送给OSS或其它终端设备,供OSS或终端设备显示。当然,若控制设备或网络设备自身具有显示功能,则也可以直接在自身的显示界面上显示配置信息对应的知识图谱,以便技术人员查看。
综上所述,在本申请实施例提供的数据处理方法中,针对网络设备中采用文本形式存储的配置信息,生成该配置信息对应的知识图谱。由于知识图谱能够直观地反映配置信息中的知识节点以及知识节点之间的关系,即能够实现配置信息的可视化,当用户需要获取网络设备的配置信息时,通过查看该配置信息对应的知识图谱即可,而无需进行人工查询命令行,因此提高了用户获取配置信息的效率。
本申请的第三个实施例提供了对配置信息进行异常检测的方式。可选地,图10是本申请实施例提供的一种对配置信息进行异常检测的实现过程示意图。可以应用于如图1至图3任一所示的数据处理系统中的控制设备101或网络设备102。如图10所示,该实现过程包括:
步骤1001、获取知识图谱模板集合以及目标网络设备的第一配置信息对应的第一知识图谱。
可选地,步骤1001的实现过程包括:生成知识图谱模板集合或者接收来自其它设备的知识图谱模板集合,并生成第一知识图谱或接收来自其它设备的第一知识图谱。例如,控制设备可以生成知识图谱模板集合并发送给网络设备,以供网络设备使用。又例如,各个网络设备可以生成自身配置信息对应的知识图谱并发送给控制设备,以供控制设备使用。其中,知识图谱模板集合的生成方式可参考上述第一个实施例,第一知识图谱的生成方式可参考上述第二个实施例,本申请实施例在此不再赘述。
步骤1002、从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板。
该第一知识图谱模板基于第一配置信息集合得到,该第一配置信息集合中的多个配置信息与第一配置信息满足相似度条件。配置信息之间满足相似度条件的相关解释可参考上述步骤401中的相关内容,本申请实施例在此不再赘述。
可选地,第一配置信息集合中的多个配置信息来自多个网络设备,该多个网络设备属于目标网络设备所在的网络,或者属于与目标网络设备所在的网络的网络类型相同的其它网络。
在一种可能实现方式中,步骤1002的实现过程包括:将知识图谱模板集合中与第一知识图谱的图谱相似度最高的知识图谱模板确定为第一知识图谱模板。
在这种实现方式中,第一配置信息可以为配置文件,满足相似度条件包括文本相似度高于第一阈值;或者,第一配置信息可以为配置块,满足相似度条件包括文本相似度高于第二阈值。也即是,知识图谱模板集合中的知识图谱模板是基于相互之间满足文本相似度条件的多个配置信息得到的。
可选地,对知识图谱模板集合进行图遍历,分别计算第一知识图谱与知识图谱模板集合中的各个知识图谱模板之间的图谱相似度,然后将与第一知识图谱的图谱相似度最高的知识图谱模板作为第一知识图谱模板。
在另一种可能实现方式中,步骤1002的实现过程包括:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板。
在这种实现方式中,第一配置信息可以为配置块,满足相似度条件包括配置对象类型相同和/或配置对象相同。也即是,知识图谱模板集合中的知识图谱模板为配置块对应的知识图谱模板,知识图谱模板是基于配置对象类型相同和/或配置对象相同的多个配置块得到的。
可选地,当知识图谱模板基于配置对象类型相同的多个配置块得到,即每个知识图谱模板对应一个配置对象类型时,根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,也即是,将第一配置信息所属的配置对象类型对应的知识图谱作为第一知识图谱模板。或者,当知识图谱模板基于配置对象相同的多个配置块得到,即每个知识图谱模板对应一个配置对象时,根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,也即是,将第一配置信息的配置对象对应的知识图谱作为第一知识图谱模板。
例如,第一配置信息为某个OSPF配置块,则将知识图谱模板集合中的该OSPF配置块对应的知识图谱模板作为第一知识图谱模板。
步骤1003、基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测。
可选地,当第一知识图谱相对于第一知识图谱模板,存在多余的或缺失的知识节点时,确定第一配置信息存在配置异常。
例如,第一配置信息为步骤801中涉及的ospf100配置块,第一知识图谱为如图9所示的知识图谱,第一知识图谱模板为如图7所示的知识图谱模板。通过比较如图7所示的知识图谱模板以及如图9所示的知识图谱可知,第一知识图谱相对于第一知识图谱模板缺失默认路由公告对应的知识节点,因此可以认为第一配置信息存在配置异常。
可选地,第一知识图谱模板上类型为参数类配置的知识节点模板具有置信区间。可以将第一知识图谱上的目标知识节点确定为异常知识节点,该目标知识节点的类型为参数类配置,且该目标知识节点的参数值超出目标知识节点模板的置信区间,该目标知识节点模板为目标知识节点在第一知识图谱模板上对应的知识节点模板。
例如,知识图谱模板上的ospf cost的置信区间为10-20,当配置信息中把ospfcost配置成100,即配置信息对应的知识图谱上从属“ospf-cost”的知识节点为“ospf-cost-100”时,确定该配置块中的ospf cost参数配置错误。
可选地,当网络设备更新配置信息或接收到外部的异常检测指令时,可以对该网络设备的最新配置信息进行异常检测,或者,也可以定期对该网络设备的配置信息进行异常检测,以便能够及时检查出网络设备的异常配置,降低网络事故风险。
本申请实施例中,基于配置信息对应的知识图谱以及知识图谱模板,可以全面检测出功能类配置的异常和参数类配置的异常,对配置信息的异常检测的覆盖率较高。另外,无需人工参与,可以实现对配置信息的自动化异常检测,开发和维护成本较低。
可选地,对第一配置信息进行异常检测后,还可以执行以下步骤1004。
步骤1004、当第一配置信息存在配置异常时,在第一知识图谱上标识出异常知识节点。
其中,第一知识图谱上的异常知识节点包括相对于第一知识图谱模板多余的、缺失的或错误的知识节点。
示例地,图11是本申请实施例提供的一种标识有异常知识节点的知识图谱的结构示意图。如图11所示,该知识图谱上标识出的异常知识节点(采用虚线表示)为相对于知识图谱模板缺失的知识节点,该异常知识节点具体为:缺失默认路由公告。
可选地,控制设备或网络设备在知识图谱上标识出异常知识节点之后,可以将标识有异常知识节点的知识图谱发送给OSS或其它终端设备,供OSS或终端设备显示。当然,若控制设备或网络设备自身具有显示功能,则也可以直接在自身的显示界面上显示该标识有异常知识节点的知识图谱,以提示技术人员配置信息存在配置异常。
本申请实施例中,可以通过知识图谱直观地显示异常知识节点,即能够直观地显示异常配置信息,便于技术人员快速获取异常配置信息并提出解决方案,提高维护效率。
本申请的第四个实施例提供了验证配置变更请求的方式。可选地,图12是本申请实施例提供的一种验证配置变更请求的实现过程示意图。可以应用于如图1至图3任一所示的数据处理系统中的控制设备101或网络设备102。如图12所示,该实现过程包括:
步骤1201、获取知识图谱模板集合以及目标网络设备的第一配置信息对应的第一知识图谱。
此步骤的实现过程可参考上述步骤1001,本申请实施例在此不再赘述。
步骤1202、当接收到针对第一配置信息的配置变更请求时,基于该配置变更请求对第一知识图谱进行更新,得到第二知识图谱。
可选地,当接收到请求更新第一配置信息的配置变更请求时,基于该配置变更请求对第一知识图谱进行更新,得到第二知识图谱。当接收到请求更换第一配置信息的配置变更请求或请求新增配置信息的配置变更请求时,基于该配置变更请求生成第二知识图谱。
步骤1203、从知识图谱模板集合中获取第二知识图谱对应的第二知识图谱模板。
该第二知识图谱模板基于第二配置信息集合得到,该第二配置信息集合中的多个配置信息与第二配置信息满足相似度条件,该第二配置信息为基于配置变更请求欲将第一配置信息变更成的配置信息。配置信息之间满足相似度条件的相关解释可参考上述步骤401中的相关内容,本申请实施例在此不再赘述。
在一种可能实现方式中,步骤1203的实现过程包括:将知识图谱模板集合中与第二知识图谱的图谱相似度最高的知识图谱模板确定为第二知识图谱模板。
在这种实现方式中,第一配置信息可以为配置文件,满足相似度条件包括文本相似度高于第一阈值;或者,第一配置信息可以为配置块,满足相似度条件包括文本相似度高于第二阈值。也即是,知识图谱模板集合中的知识图谱模板是基于相互之间满足文本相似度条件的多个配置信息得到的。
可选地,对知识图谱模板集合进行图遍历,分别计算第二知识图谱与知识图谱模板集合中的各个知识图谱模板之间的图谱相似度,然后将与第二知识图谱的图谱相似度最高的知识图谱模板作为第二知识图谱模板。
在另一种可能实现方式中,步骤1203的实现过程包括:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,并将该第一知识图谱模板作为第二知识图谱模板。
在这种实现方式中,第一配置信息可以为配置块,满足相似度条件包括配置对象类型相同和/或配置对象相同。也即是,知识图谱模板集合中的知识图谱模板为配置块对应的知识图谱模板,知识图谱模板是基于配置对象类型相同和/或配置对象相同的多个配置块得到的。
可选地,当知识图谱模板基于配置对象类型相同的多个配置块得到,即每个知识图谱模板对应一个配置对象类型时,根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,也即是,将第一配置信息所属的配置对象类型对应的知识图谱作为第一知识图谱模板。或者,当知识图谱模板基于配置对象相同的多个配置块得到,即每个知识图谱模板对应一个配置对象时,根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,也即是,将第一配置信息的配置对象对应的知识图谱作为第一知识图谱模板。由于配置变更请求通常用于请求更改配置块的内容,而不会更改配置块的配置对象(更改配置块的配置对象属于重写配置块,本申请实施例中不将其划分为更新配置块的范畴),因此在这种实现方式中,配置块对应的知识图谱模板不会变。
例如,第一配置信息为某个OSPF配置块,则将知识图谱模板集合中的该OSPF配置块对应的知识图谱模板作为第二知识图谱模板。
步骤1204、基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常。
可选地,若第二知识图谱模板为知识图谱模板集合中与第二知识图谱的图谱相似度最高的知识图谱模板,则当第二知识图谱模板与第二知识图谱的图谱相似度低于第三阈值时,确定该配置变更请求异常。
可选地,当第二知识图谱上基于配置变更请求更改的知识节点相对于第二知识图谱模板异常时,确定配置变更请求异常。例如,若第二知识图谱上基于配置变更请求更改的知识节点相对于第二知识图谱模板多余、缺失或错误,或者参数类配置的参数值超出置信区间,则确定该配置变更请求异常。
若第二知识图谱为新生成的知识图谱,则基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常,即对配置变更请求中的配置信息进行异常检测,该实现过程可参考上述步骤1003中基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测的过程,本申请实施例在此不再赘述。
步骤1205、响应于配置变更请求正常,基于该配置变更请求更新第一配置信息,得到第二配置信息;或者响应于配置变更请求异常,输出针对该配置变更请求的异常告警。
网络设备响应于配置变更请求正常,基于该配置变更请求更新第一配置信息,即根据配置变更请求更改第一配置信息中对应的配置,以得到第二配置信息。控制设备响应于配置变更请求正常,基于该配置变更请求更新第一配置信息,即向网络设备发送更新指示,该更新指示用于指示网络设备基于该配置变更请求更新第一配置信息,以得到第二配置信息。
网络设备响应于配置变更请求异常,输出针对该配置变更请求的异常告警,可以是向控制设备发送针对该配置变更请求的异常告警,或者也可以是在自身或与该网络设备连接的显示设备上显示该异常告警的告警内容。控制设备响应于配置变更请求异常,输出针对该配置变更请求的异常告警,可以是在自身或与该控制设备连接的显示设备上显示该异常告警的告警内容。当配置变更请求异常时,网络设备或控制设备输出针对该配置变更请求的异常告警,还可以提示技术人员选择继续更新或结束更新或更改配置变更请求。
本申请实施例中,网络设备或控制设备在接收到配置变更请求后,先基于该配置变更请求更新知识图谱,基于更新后的知识图谱以及对应的知识图谱模板验证该配置变更请求是否异常,在确认配置变更请求正常后再基于该配置变更请求更新配置信息,而非直接更新配置信息,可以降低由于配置变更异常而导致的网络事故风险,提高网络运行可靠性。
图13是本申请实施例提供的一种数据处理装置的结构示意图。该装置可以是如图1至图3任一所示的数据处理系统中的控制设备101或网络设备102。如图13所示,装置130包括:
第一获取模块1301,用于获取目标网络设备的第一配置信息。
第一生成模块1302,用于基于第一配置信息生成多个知识图谱三元组,每个知识图谱三元组包括两个知识节点以及两个知识节点之间的关系,知识节点的类型包括功能类配置和参数类配置。
第二生成模块1303,还用于根据多个知识图谱三元组,生成第一配置信息对应的第一知识图谱。
可选地,两个知识节点之间的关系为从属关系或对等关系。
可选地,第一配置信息为目标网络设备的配置文件,或者,第一配置信息为目标网络设备的配置文件中的配置块。
可选地,第一生成模块1302,用于:对第一配置信息中的命令行进行分词处理,得到多个知识节点;根据多个知识节点生成多个知识图谱三元组。
可选地,第一生成模块1302,用于:根据多个知识节点在第一配置信息的命令行中的位置,确定多个知识节点之间的关系;根据多个知识节点以及多个知识节点之间的关系,生成多个知识图谱三元组。
可选地,如图14所示,装置130还包括:
第二获取模块1304,用于获取知识图谱模板集合,知识图谱模板集合包括多个知识图谱模板,每个知识图谱模板基于一个配置信息集合得到,配置信息集合包括相互之间满足相似度条件的多个配置信息。第三获取模块1305,用于从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,第一知识图谱模板基于第一配置信息集合得到,第一配置信息集合中的多个配置信息与第一配置信息满足相似度条件。异常检测模块1306,用于基于第一知识图谱模板以及第一知识图谱,对第一配置信息进行异常检测。
可选地,配置信息为配置文件,满足相似度条件,包括:文本相似度高于第一阈值。
可选地,配置信息为配置块,满足相似度条件,包括:文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同。
可选地,第一配置信息集合中的多个配置信息来自多个网络设备,多个网络设备属于目标网络设备所在的网络,或者属于与目标网络设备所在的网络的网络类型相同的其它网络。
可选地,第三获取模块1305,用于:将知识图谱模板集合中与第一知识图谱的图谱相似度最高的知识图谱模板确定为第一知识图谱模板。
可选地,第三获取模块1305,用于:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板。
可选地,第二获取模块1304,用于:获取多个配置信息集合;基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。
可选地,第二获取模块1304,用于:对每个配置信息集合,生成配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据多个知识图谱确定配置信息集合对应的知识图谱模板。
可选地,知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,第二获取模块1304,用于:根据多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为目标参数类配置的知识节点模板的置信区间。
可选地,异常检测模块1306,用于:当第一知识图谱相对于第一知识图谱模板,存在多余的或缺失的知识节点时,确定第一配置信息存在配置异常。
可选地,第一知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,异常检测模块1306,用于:将第一知识图谱上的目标知识节点确定为异常知识节点,目标知识节点的类型为参数类配置,且目标知识节点的参数值超出目标知识节点模板的置信区间,目标知识节点模板为目标知识节点在第一知识图谱模板上对应的知识节点模板。
可选地,如图15所示,装置130还包括:
标识模块1307,用于当第一配置信息存在配置异常时,在第一知识图谱上标识出异常知识节点。
可选地,如图16所示,装置130还包括确定模块1308。
确定模块1308,用于:将在多个知识图谱中出现次数大于第一阈值的知识节点的类型确定为功能类配置;将在多个知识图谱中出现次数小于第二阈值的知识节点的类型确定为参数类配置;其中,第一阈值大于或等于第二阈值。
可选地,如图17所示,装置130还包括:
第一更新模块1309,用于当接收到针对第一配置信息的配置变更请求时,基于配置变更请求对第一知识图谱进行更新,得到第二知识图谱。第四获取模块1310,用于从知识图谱模板集合中获取第二知识图谱对应的第二知识图谱模板,知识图谱模板集合包括多个知识图谱模板,每个知识图谱模板基于一个配置信息集合得到,配置信息集合包括相互之间满足相似度条件的多个配置信息。验证模块1311,用于基于第二知识图谱模板以及第二知识图谱,验证配置变更请求是否异常。
可选地,第四获取模块1310,用于:将知识图谱模板集合中与第二知识图谱的图谱相似度最高的知识图谱模板确定为第二知识图谱模板。
相应地,验证模块1311,用于:当第二知识图谱模板与第二知识图谱的图谱相似度低于第三阈值时,确定配置变更请求异常。
可选地,第四获取模块1310,用于:根据第一配置信息的配置对象,从知识图谱模板集合中获取第一知识图谱对应的第一知识图谱模板,并将第一知识图谱模板作为第二知识图谱模板。
相应地,验证模块1311,用于:当第二知识图谱上基于配置变更请求更改的知识节点相对于第二知识图谱模板异常时,确定配置变更请求异常。
可选地,如图18所示,装置130还包括:
第二更新模块1312,用于响应于配置变更请求正常,基于配置变更请求更新第一配置信息,得到第二配置信息。
输出模块1313,用于响应于配置变更请求异常,输出针对配置变更请求的异常告警。
图19是本申请又一实施例提供的一种数据处理装置的结构示意图。该装置可以是如图1至图3任一所示的数据处理系统中的控制设备101或网络设备102。如图19所示,装置190包括:
获取模块1901,用于获取多个配置信息集合,每个配置信息集合包括相互之间满足相似度条件的多个配置信息。
生成模块1902,用于基于多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,知识图谱模板上包括多个知识节点模板,知识节点模板的类型包括功能类配置和参数类配置。
可选地,生成模块1902,用于:对每个配置信息集合,生成配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据多个知识图谱确定配置信息集合对应的知识图谱模板。
可选地,知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,生成模块1902,用于:根据多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为目标参数类配置的知识节点模板的置信区间。
可选地,配置信息为配置文件,获取模块1901,用于:对来自多个网络设备的配置文件进行分类,得到多个配置信息集合,每个配置信息集合包括相互之间文本相似度高于第一阈值的多个配置文件。
可选地,配置信息为配置块,获取模块1901,用于:对来自一个或多个网络设备的配置块进行分类,得到多个配置信息集合,每个配置信息集合包括相互之间文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同的多个配置块。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本申请实施例还提供了一种数据处理装置,包括:处理器和存储器;
所述存储器,用于存储计算机程序,所述计算机程序包括程序指令;
所述处理器,用于调用所述计算机程序,实现如图4、图8、图10和图12任一所示的方法。
图20是本申请实施例提供的一种数据处理装置的框图。该数据处理装置可以是控制设备或网络设备。控制设备可以是网络控制器,网络管理设备,网关或其它具有控制能力的设备。网络设备可以是交换机、路由器或接入网设备等。如图20所示,该装置200包括:处理器2001和存储器2002。
存储器2002,用于存储计算机程序,所述计算机程序包括程序指令;
处理器2001,用于调用所述计算机程序,实现如图4、图8、图10和图12任一所示的方法。
可选地,该装置200还包括通信总线2003和通信接口2004。
其中,处理器2001包括一个或者一个以上处理核心,处理器2001通过运行计算机程序,执行各种功能应用以及数据处理。
存储器2002可用于存储计算机程序。可选地,存储器可存储操作系统和至少一个功能所需的应用程序单元。操作系统可以是实时操作系统(Real Time eXecutive,RTX)、LINUX、UNIX、WINDOWS或OS X之类的操作系统。
通信接口2004可以为多个,通信接口2004用于与其它设备进行通信。例如在本申请实施例中,控制设备的通信接口2004可以用于向通信网络中的网络设备发送知识图谱模板集合;网络设备的通信接口2004可以用于向控制设备发送配置文件;等等。
存储器2002与通信接口2004分别通过通信总线2003与处理器2001连接。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质上存储有指令,当所述指令被计算机设备的处理器执行时,实现如图4、图8、图10和图12任一所示的方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本申请实施例中,术语“第一”、“第二”和“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
本申请中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的构思和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (40)
1.一种数据处理方法,其特征在于,所述方法包括:
获取目标网络设备的第一配置信息;
基于所述第一配置信息生成多个知识图谱三元组,每个所述知识图谱三元组包括两个知识节点以及所述两个知识节点之间的关系,所述知识节点的类型包括功能类配置和参数类配置;
根据所述多个知识图谱三元组,生成所述第一配置信息对应的第一知识图谱。
2.根据权利要求1所述的方法,其特征在于,所述两个知识节点之间的关系为从属关系或对等关系。
3.根据权利要求1或2所述的方法,其特征在于,所述第一配置信息为所述目标网络设备的配置文件,或者,所述第一配置信息为所述目标网络设备的配置文件中的配置块。
4.根据权利要求1至3任一所述的方法,其特征在于,所述基于所述第一配置信息生成多个知识图谱三元组,包括:
对所述第一配置信息中的命令行进行分词处理,得到多个知识节点;
根据所述多个知识节点生成所述多个知识图谱三元组。
5.根据权利要求4所述的方法,其特征在于,所述根据所述多个知识节点生成所述多个知识图谱三元组,包括:
根据所述多个知识节点在所述第一配置信息的命令行中的位置,确定所述多个知识节点之间的关系;
根据所述多个知识节点以及所述多个知识节点之间的关系,生成所述多个知识图谱三元组。
6.根据权利要求1至5任一所述的方法,其特征在于,所述方法还包括:
获取知识图谱模板集合,所述知识图谱模板集合包括多个知识图谱模板,每个所述知识图谱模板基于一个配置信息集合得到,所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
从所述知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板,所述第一知识图谱模板基于第一配置信息集合得到,所述第一配置信息集合中的多个配置信息与所述第一配置信息满足相似度条件;
基于所述第一知识图谱模板以及所述第一知识图谱,对所述第一配置信息进行异常检测。
7.根据权利要求6所述的方法,其特征在于,所述配置信息为配置文件,所述满足相似度条件,包括:文本相似度高于第一阈值。
8.根据权利要求6所述的方法,其特征在于,所述配置信息为配置块,所述满足相似度条件,包括:文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同。
9.根据权利要求7或8所述的方法,其特征在于,所述第一配置信息集合中的多个配置信息来自多个网络设备,所述多个网络设备属于所述目标网络设备所在的网络,或者属于与所述目标网络设备所在的网络的网络类型相同的其它网络。
10.根据权利要求6至9任一所述的方法,其特征在于,所述从知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板,包括:
将所述知识图谱模板集合中与所述第一知识图谱的图谱相似度最高的知识图谱模板确定为所述第一知识图谱模板。
11.根据权利要求6至9任一所述的方法,其特征在于,所述从知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板,包括:
根据所述第一配置信息的配置对象,从所述知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板。
12.根据权利要求6至11任一所述的方法,其特征在于,所述获取知识图谱模板集合,包括:
获取多个所述配置信息集合;
基于多个所述配置信息集合分别生成多个所述知识图谱模板,以得到所述知识图谱模板集合,所述知识图谱模板上包括多个知识节点模板,所述知识节点模板的类型包括功能类配置和参数类配置。
13.根据权利要求12所述的方法,其特征在于,所述基于多个所述配置信息集合分别生成多个所述知识图谱模板,包括:
对每个所述配置信息集合,生成所述配置信息集合中的多个配置信息分别对应的多个知识图谱,并根据所述多个知识图谱确定所述配置信息集合对应的知识图谱模板。
14.根据权利要求13所述的方法,其特征在于,所述知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,所述根据所述多个知识图谱确定所述配置信息集合对应的知识图谱模板,包括:
根据所述多个配置信息中从属相同功能类配置的目标参数类配置的参数值,确定类型为所述目标参数类配置的知识节点模板的置信区间。
15.根据权利要求6至14任一所述的方法,其特征在于,所述基于所述第一知识图谱模板以及所述第一知识图谱,对所述第一配置信息进行异常检测,包括:
当所述第一知识图谱相对于所述第一知识图谱模板,存在多余的或缺失的知识节点时,确定所述第一配置信息存在配置异常。
16.根据权利要求6至15任一所述的方法,其特征在于,所述第一知识图谱模板上类型为参数类配置的知识节点模板具有置信区间,所述基于所述第一知识图谱模板以及所述第一知识图谱,对所述第一配置信息进行异常检测,包括:
将所述第一知识图谱上的目标知识节点确定为异常知识节点,所述目标知识节点的类型为参数类配置,且所述目标知识节点的参数值超出目标知识节点模板的置信区间,所述目标知识节点模板为所述目标知识节点在所述第一知识图谱模板上对应的知识节点模板。
17.根据权利要求6至16任一所述的方法,其特征在于,所述方法还包括:
当所述第一配置信息存在配置异常时,在所述第一知识图谱上标识出异常知识节点。
18.根据权利要求1至17任一所述的方法,其特征在于,所述方法还包括:
将在多个知识图谱中出现次数大于第一阈值的知识节点的类型确定为功能类配置;
将在多个知识图谱中出现次数小于第二阈值的知识节点的类型确定为参数类配置;
其中,所述第一阈值大于或等于所述第二阈值。
19.根据权利要求1至18任一所述的方法,其特征在于,所述方法还包括:
当接收到针对所述第一配置信息的配置变更请求时,基于所述配置变更请求对所述第一知识图谱进行更新,得到第二知识图谱;
从知识图谱模板集合中获取所述第二知识图谱对应的第二知识图谱模板,所述知识图谱模板集合包括多个知识图谱模板,每个所述知识图谱模板基于一个配置信息集合得到,所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
基于所述第二知识图谱模板以及所述第二知识图谱,验证所述配置变更请求是否异常。
20.根据权利要求19所述的方法,其特征在于,所述从知识图谱模板集合中获取所述第二知识图谱对应的第二知识图谱模板,包括:
将所述知识图谱模板集合中与所述第二知识图谱的图谱相似度最高的知识图谱模板确定为所述第二知识图谱模板。
21.根据权利要求20所述的方法,其特征在于,所述基于所述第二知识图谱模板以及所述第二知识图谱,验证所述配置变更请求是否异常,包括:
当所述第二知识图谱模板与所述第二知识图谱的图谱相似度低于第三阈值时,确定所述配置变更请求异常。
22.根据权利要求19所述的方法,其特征在于,所述从知识图谱模板集合中获取所述第二知识图谱对应的第二知识图谱模板,包括:
根据所述第一配置信息的配置对象,从所述知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板,并将所述第一知识图谱模板作为所述第二知识图谱模板。
23.根据权利要求19至22任一所述的方法,其特征在于,所述基于所述第二知识图谱模板以及所述第二知识图谱,验证所述配置变更请求是否异常,包括:
当所述第二知识图谱上基于所述配置变更请求更改的知识节点相对于所述第二知识图谱模板异常时,确定所述配置变更请求异常。
24.根据权利要求19至23任一所述的方法,其特征在于,所述方法还包括:
响应于所述配置变更请求正常,基于所述配置变更请求更新所述第一配置信息,得到第二配置信息;或者,
响应于所述配置变更请求异常,输出针对所述配置变更请求的异常告警。
25.一种数据处理方法,其特征在于,所述方法包括:
获取多个配置信息集合,每个所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
基于所述多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,所述知识图谱模板上包括多个知识节点模板,所述知识节点模板的类型包括功能类配置和参数类配置。
26.根据权利要求25所述的方法,其特征在于,所述配置信息为配置文件,所述获取配置信息集合,包括:
对来自多个网络设备的配置文件进行分类,得到所述多个配置信息集合,每个所述配置信息集合包括相互之间文本相似度高于第一阈值的多个配置文件;或者,
所述配置信息为配置块,所述获取配置信息集合,包括:
对来自一个或多个网络设备的配置块进行分类,得到所述多个配置信息集合,每个所述配置信息集合包括相互之间文本相似度高于第二阈值,配置对象类型相同,和/或,配置对象相同的多个配置块。
27.一种数据处理装置,其特征在于,所述装置包括:
第一获取模块,用于获取目标网络设备的第一配置信息;
第一生成模块,用于基于所述第一配置信息生成多个知识图谱三元组,每个所述知识图谱三元组包括两个知识节点以及所述两个知识节点之间的关系,所述知识节点的类型包括功能类配置和参数类配置;
第二生成模块,还用于根据所述多个知识图谱三元组,生成所述第一配置信息对应的第一知识图谱。
28.根据权利要求27所述的装置,其特征在于,所述装置还包括:
第二获取模块,用于获取知识图谱模板集合,所述知识图谱模板集合包括多个知识图谱模板,每个所述知识图谱模板基于一个配置信息集合得到,所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
第三获取模块,用于从所述知识图谱模板集合中获取所述第一知识图谱对应的第一知识图谱模板,所述第一知识图谱模板基于第一配置信息集合得到,所述第一配置信息集合中的多个配置信息与所述第一配置信息满足相似度条件;
异常检测模块,用于基于所述第一知识图谱模板以及所述第一知识图谱,对所述第一配置信息进行异常检测。
29.根据权利要求27或28所述的装置,其特征在于,所述装置还包括:
标识模块,用于当所述第一配置信息存在配置异常时,在所述第一知识图谱上标识出异常知识节点。
30.根据权利要求27至29任一所述的装置,其特征在于,所述装置还包括确定模块,所述确定模块,用于:
将在多个知识图谱中出现次数大于第一阈值的知识节点的类型确定为功能类配置;
将在多个知识图谱中出现次数小于第二阈值的知识节点的类型确定为参数类配置;
其中,所述第一阈值大于或等于所述第二阈值。
31.根据权利要求27至30任一所述的装置,其特征在于,所述装置还包括:
第一更新模块,用于当接收到针对所述第一配置信息的配置变更请求时,基于所述配置变更请求对所述第一知识图谱进行更新,得到第二知识图谱;
第四获取模块,用于从知识图谱模板集合中获取所述第二知识图谱对应的第二知识图谱模板,所述知识图谱模板集合包括多个知识图谱模板,每个所述知识图谱模板基于一个配置信息集合得到,所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
验证模块,用于基于所述第二知识图谱模板以及所述第二知识图谱,验证所述配置变更请求是否异常。
32.根据权利要求31所述的装置,其特征在于,所述装置还包括:
第二更新模块,用于响应于所述配置变更请求正常,基于所述配置变更请求更新所述第一配置信息,得到第二配置信息;
输出模块,用于响应于所述配置变更请求异常,输出针对所述配置变更请求的异常告警。
33.一种数据处理装置,其特征在于,所述装置包括:
获取模块,用于获取多个配置信息集合,每个所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
生成模块,用于基于所述多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,所述知识图谱模板上包括多个知识节点模板,所述知识节点模板的类型包括功能类配置和参数类配置。
34.一种数据处理系统,其特征在于,包括:控制设备和通信网络中的网络设备;
所述网络设备用于向所述控制设备发送所述网络设备的配置文件;
所述控制设备用于根据所述通信网络中的网络设备的配置文件,获取多个配置信息集合,每个所述配置信息集合包括相互之间满足相似度条件的多个配置信息;
所述控制设备还用于基于所述多个配置信息集合分别生成多个知识图谱模板,以得到知识图谱模板集合,所述知识图谱模板上包括多个知识节点模板,所述知识节点模板的类型包括功能类配置和参数类配置。
35.根据权利要求34所述的系统,其特征在于,
所述控制设备还用于向所述网络设备发送所述知识图谱模板集合;
所述网络设备还用于根据所述网络设备的配置信息对应的知识图谱模板以及所述网络设备的配置信息对应的知识图谱,对所述网络设备的配置信息进行异常检测;和/或,在接收到针对所述网络设备的配置信息的配置变更请求后,更新所述网络设备的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及所述更新后的知识图谱,验证所述配置变更请求是否异常。
36.根据权利要求35所述的系统,其特征在于,
所述网络设备还用于响应于所述配置变更请求正常,基于所述配置变更请求更新所述网络设备的配置信息,或者,响应于所述配置变更请求异常,向所述控制设备发送针对所述配置变更请求的异常告警;
所述控制设备还用于在接收到针对所述配置变更请求的异常告警后,显示所述异常告警的告警内容。
37.根据权利要求34所述的系统,其特征在于,
所述控制设备还用于根据所述网络设备的配置信息对应的知识图谱模板以及所述网络设备的配置信息对应的知识图谱,对所述网络设备的配置信息进行异常检测;和/或,在接收到针对所述网络设备的配置信息的配置变更请求后,更新所述网络设备的配置信息对应的知识图谱,并基于更新后的知识图谱对应的知识图谱模板以及所述更新后的知识图谱,验证所述配置变更请求是否异常。
38.根据权利要求37所述的系统,其特征在于,
所述控制设备还用于响应于所述配置变更请求正常,向所述网络设备发送更新指示,所述更新指示用于指示所述网络设备基于所述配置变更请求更新所述网络设备的配置信息;
或者,所述控制设备还用于响应于所述配置变更请求异常,显示针对所述配置变更请求的告警内容。
39.一种数据处理装置,其特征在于,包括:处理器和存储器;
所述存储器,用于存储计算机程序,所述计算机程序包括程序指令;
所述处理器,用于调用所述计算机程序,实现如权利要求1至26任一所述的数据处理方法。
40.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有指令,当所述指令被计算机设备的处理器执行时,实现如权利要求1至26任一所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011299385.8A CN114519095A (zh) | 2020-11-18 | 2020-11-18 | 数据处理方法、装置及系统、计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011299385.8A CN114519095A (zh) | 2020-11-18 | 2020-11-18 | 数据处理方法、装置及系统、计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114519095A true CN114519095A (zh) | 2022-05-20 |
Family
ID=81594132
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011299385.8A Pending CN114519095A (zh) | 2020-11-18 | 2020-11-18 | 数据处理方法、装置及系统、计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114519095A (zh) |
-
2020
- 2020-11-18 CN CN202011299385.8A patent/CN114519095A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7108674B2 (ja) | 故障根本原因決定方法及び装置並びにコンピュータ記憶媒体 | |
US11218376B2 (en) | Algorithmic problem identification and resolution in fabric networks by software defined operations, administration, and maintenance | |
US10862749B1 (en) | Systems for and methods of network management and verification using intent inference | |
CN112787841B (zh) | 故障根因定位方法及装置、计算机存储介质 | |
WO2022083540A1 (zh) | 故障恢复预案确定方法、装置及系统、计算机存储介质 | |
US9331910B2 (en) | Methods and systems for automatic generation of routing configuration files | |
CN110785964B (zh) | 网络中第3层桥接域子网的验证 | |
US20220200844A1 (en) | Data processing method and apparatus, and computer storage medium | |
US20190149416A1 (en) | Automated network entity replacement based on historical topology consciousness | |
CN108259215B (zh) | 一种设备管理方法及装置 | |
CN109672562B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
WO2022001924A1 (zh) | 构建知识图谱的方法、装置及系统、计算机存储介质 | |
CN112956158A (zh) | 结构数据平面监视 | |
CN113852476A (zh) | 确定异常事件关联对象的方法、装置及系统 | |
US11121952B2 (en) | Device health assessment data summarization using machine learning | |
US20230344755A1 (en) | Determining flow paths of packets through nodes of a network | |
US20230254244A1 (en) | Path determining method and apparatus, and computer storage medium | |
CN115190068A (zh) | 一种减少路由环路的方法、装置及系统 | |
CN114519095A (zh) | 数据处理方法、装置及系统、计算机存储介质 | |
US11438237B1 (en) | Systems and methods for determining physical links between network devices | |
CN116248479A (zh) | 网络路径探测方法、装置、设备及存储介质 | |
CN115766252A (zh) | 一种流量异常检测方法、装置、电子设备及存储介质 | |
CN112448915B (zh) | 配置报文的验证方法及装置、计算机存储介质 | |
CN113992562B (zh) | 路由信息的更新方法、系统及路由分析器 | |
TWI836734B (zh) | 基於軟體定義網路控制器之自動納管系統、方法及電腦可讀媒介 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |