CN109933633A - 一种基于时间和场景维度的运维知识图谱构建方法 - Google Patents
一种基于时间和场景维度的运维知识图谱构建方法 Download PDFInfo
- Publication number
- CN109933633A CN109933633A CN201910263048.4A CN201910263048A CN109933633A CN 109933633 A CN109933633 A CN 109933633A CN 201910263048 A CN201910263048 A CN 201910263048A CN 109933633 A CN109933633 A CN 109933633A
- Authority
- CN
- China
- Prior art keywords
- alarm
- entity
- time
- relationship
- knowledge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013507 mapping Methods 0.000 title claims abstract description 19
- 238000010276 construction Methods 0.000 title claims abstract description 10
- 238000010586 diagram Methods 0.000 claims description 3
- 238000004321 preservation Methods 0.000 claims description 3
- 238000001228 spectrum Methods 0.000 claims 1
- 238000000034 method Methods 0.000 abstract description 10
- 238000005516 engineering process Methods 0.000 abstract description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000003739 neck Anatomy 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及信息技术领域，特别是一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，a、构建一个分布式的消息中间件；b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化；c、将接收到的告警码等信息进行数据格式化；d、形成一个告警知识族谱；e、重复c、d步骤；f、展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。采用上述方法后，本发明通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑；当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
Description
技术领域
本发明涉及信息技术领域，特别是一种基于时间和场景维度的运维知识图谱构建方法。
背景技术
知识图谱能提供高质量的结构化数据，目前已经广泛地应用于人工智能的多个领域，例如自动问答、搜索引擎以及信息抽取。典型的知识图谱通常以三元组的形式表示-(头实体，关系，尾实体)，例如(姚明，国籍，中国)反映了姚明的国籍是中国这件事实。然而，大多数现有的知识图谱都是以半自动或者人工的方式构建，因此存在两个问题：(1)不完整，知识图谱中很多实体之间潜在的关系没有被挖掘；(2)扩展性较差，不能自动地向知识图谱中添加新实体。
现有的运维知识图谱主要以CMDB和运维知识库为主，通过自动丰富运维知识，形成企业专有的运维知识库。以CMDB为核心构建的配置变更管理库，需要依托于变更流程对配置进行变化，不是实时更新的机制，无法适应容器以及云环境(容器环境和云环境，资源之间的关系是完全动态的，是系统自动调整的)。传统配置变更的拓扑不是时序化的，无法根据故障时间找出对应的拓扑。传统的运维知识是静态的，单一的，平面化的展现，即一个告警码的描述和处理建议是唯一的，但在实际运维工作中，该告警码根据不同业务，不同环境，出现的原因会存在差异性，因此现有的模式延缓了故障定位和故障解决的时间。
发明内容
本发明需要解决的技术问题是提供一种支持场景的可扩展性，拓扑的时序性构建立体化的运维知识图谱方法。
为解决上述技术问题，本发明的一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，
a、构建一个分布式的消息中间件；
b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系；
c、通过从分布式的消息中间件中接收到的告警码等信息进行数据格式化；
d、当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔超过设置的时间范围，形成一个告警知识族谱；
e、如果新的告警码时间间隔超过设置的时间范围，即标识该告警码为新的告警知识族谱，重复c、d步骤；
f、通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
优选的，步骤a中，构建一个分布式的消息中间件，能够通过JSON等多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
优选的，步骤b中，通过格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中。
优选的，步骤b中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
优选的，步骤c中，告警码消息中包含时间和告警码两个信息，数据接收消息的接口继续等待。
采用上述方法后，本发明通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑；当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细的说明。
图1为本发明一种基于时间和场景维度的运维知识图谱构建方法的流程图。
具体实施方式
如图1所示，本发明的一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，
a.构建一个分布式的消息中间件，能够通过JSON等多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
b.通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
c.通过从分布式的消息中间件中接收到的告警码等信息进行数据格式化，告警码消息中一定包含时间和告警码两个信息，数据接收消息的接口继续等待。
d.当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔范围在X分钟内，X为可定义的参数，即将新的告警码与之前收到的告警码进行关联映射，形成一个告警知识族谱。
e.如果新的告警码时间间隔超过X分钟，即标识该告警码为新的告警知识族谱，重复c、d步骤。
f.通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑。当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
虽然以上描述了本发明的具体实施方式，但是本领域熟练技术人员应当理解，这些仅是举例说明，可以对本实施方式作出多种变更或修改，而不背离本发明的原理和实质，本发明的保护范围仅由所附权利要求书限定。
Claims (5)
1.一种基于时间和场景维度的运维知识图谱构建方法，其特征在于，包括以下步骤，
a、构建一个分布式的消息中间件；
b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系；
c、通过从分布式的消息中间件中接收到的告警码等信息进行数据格式化；
d、当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔超过设置的时间范围，形成一个告警知识族谱；
e、如果新的告警码时间间隔超过设置的时间范围，即标识该告警码为新的告警知识族谱，重复c、d步骤；
f、通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
2.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤a中，构建一个分布式的消息中间件，能够通过JSON等多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
3.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤b中，通过格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中。
4.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤b中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
5.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤c中，告警码消息中包含时间和告警码两个信息，数据接收消息的接口继续等待。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910263048.4A CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910263048.4A CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109933633A true CN109933633A (zh) | 2019-06-25 |
| CN109933633B CN109933633B (zh) | 2021-02-05 |
Family
ID=66989081
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910263048.4A Active CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109933633B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110609927A (zh) * | 2019-09-24 | 2019-12-24 | 厦门市美亚柏科信息股份有限公司 | 一种可视化家谱布局方法、终端设备及存储介质 |
| CN111221702A (zh) * | 2019-11-18 | 2020-06-02 | 上海维谛信息科技有限公司 | 基于日志分析的异常处理方法、系统、终端及介质 |
| CN111352759A (zh) * | 2019-12-31 | 2020-06-30 | 杭州亚信软件有限公司 | 一种告警根因的判定方法及装置 |
| CN111523122A (zh) * | 2020-01-17 | 2020-08-11 | 中国银联股份有限公司 | 回溯安全边界的配置的方法和系统 |
| CN112804079A (zh) * | 2020-12-10 | 2021-05-14 | 北京浪潮数据技术有限公司 | 云计算平台告警分析方法、装置、设备及存储介质 |
| CN113254668A (zh) * | 2021-06-11 | 2021-08-13 | 云南大学 | 一种基于场景纬度的知识图谱构建方法及系统 |
| CN114117077A (zh) * | 2021-12-02 | 2022-03-01 | 睿云奇智(重庆)科技有限公司 | 运维知识图谱构建及运维的方法、装置及计算机设备、存储介质 |
| CN114710392A (zh) * | 2022-03-23 | 2022-07-05 | 阿里云计算有限公司 | 事件信息的获取方法及装置 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1242897A (zh) * | 1997-10-28 | 2000-01-26 | 国际商业机器公司 | 多存取计算机通信系统及其通信方法 |
| CN102523126A (zh) * | 2011-12-29 | 2012-06-27 | 深圳市同洲视讯传媒有限公司 | 一种告警事件发送方法及装置 |
| CN107103100A (zh) * | 2017-06-10 | 2017-08-29 | 海南大学 | 一种投入驱动的容错的基于数据图谱、信息图谱和知识图谱架构的智能语义搜索方法 |
| CN107633044A (zh) * | 2017-09-14 | 2018-01-26 | 国家计算机网络与信息安全管理中心 | 一种基于热点事件的舆情知识图谱构建方法 |
| US20180032506A1 (en) * | 2016-07-29 | 2018-02-01 | Rovi Guides, Inc. | Systems and methods for disambiguating a term based on static and temporal knowledge graphs |
| CN107704637A (zh) * | 2017-11-20 | 2018-02-16 | 中国人民解放军国防科技大学 | 一种面向突发事件的知识图谱构建方法 |
| CN109086347A (zh) * | 2018-07-13 | 2018-12-25 | 武汉尼维智能科技有限公司 | 一种国际海运危险货物知识图谱系统的构建方法、装置及存储介质 |
-
2019
- 2019-04-02 CN CN201910263048.4A patent/CN109933633B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1242897A (zh) * | 1997-10-28 | 2000-01-26 | 国际商业机器公司 | 多存取计算机通信系统及其通信方法 |
| CN102523126A (zh) * | 2011-12-29 | 2012-06-27 | 深圳市同洲视讯传媒有限公司 | 一种告警事件发送方法及装置 |
| US20180032506A1 (en) * | 2016-07-29 | 2018-02-01 | Rovi Guides, Inc. | Systems and methods for disambiguating a term based on static and temporal knowledge graphs |
| CN107103100A (zh) * | 2017-06-10 | 2017-08-29 | 海南大学 | 一种投入驱动的容错的基于数据图谱、信息图谱和知识图谱架构的智能语义搜索方法 |
| CN107633044A (zh) * | 2017-09-14 | 2018-01-26 | 国家计算机网络与信息安全管理中心 | 一种基于热点事件的舆情知识图谱构建方法 |
| CN107704637A (zh) * | 2017-11-20 | 2018-02-16 | 中国人民解放军国防科技大学 | 一种面向突发事件的知识图谱构建方法 |
| CN109086347A (zh) * | 2018-07-13 | 2018-12-25 | 武汉尼维智能科技有限公司 | 一种国际海运危险货物知识图谱系统的构建方法、装置及存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| XIONGFEI GENG: ""Ship Scheduling in Inland Waterway Networks Based on Cellular Automata Graph"", 《INTERNATIONAL CONFERENCE ON CYBER-ENABLED DISTRIBUTED COMPUTING AND KNOWLEDGE DISCOVERY, CYBERC》 * |
| 李新鹏 等: ""调度自动化系统知识图谱的构建与应用"", 《中国电力》 * |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110609927B (zh) * | 2019-09-24 | 2022-02-15 | 厦门市美亚柏科信息股份有限公司 | 一种可视化家谱布局方法、终端设备及存储介质 |
| CN110609927A (zh) * | 2019-09-24 | 2019-12-24 | 厦门市美亚柏科信息股份有限公司 | 一种可视化家谱布局方法、终端设备及存储介质 |
| CN111221702A (zh) * | 2019-11-18 | 2020-06-02 | 上海维谛信息科技有限公司 | 基于日志分析的异常处理方法、系统、终端及介质 |
| CN111221702B (zh) * | 2019-11-18 | 2024-02-27 | 上海维谛信息科技有限公司 | 基于日志分析的异常处理方法、系统、终端及介质 |
| CN111352759A (zh) * | 2019-12-31 | 2020-06-30 | 杭州亚信软件有限公司 | 一种告警根因的判定方法及装置 |
| CN111352759B (zh) * | 2019-12-31 | 2024-04-02 | 杭州亚信软件有限公司 | 一种告警根因的判定方法及装置 |
| CN111523122A (zh) * | 2020-01-17 | 2020-08-11 | 中国银联股份有限公司 | 回溯安全边界的配置的方法和系统 |
| CN111523122B (zh) * | 2020-01-17 | 2024-05-17 | 中国银联股份有限公司 | 回溯安全边界的配置的方法和系统 |
| CN112804079B (zh) * | 2020-12-10 | 2023-04-07 | 北京浪潮数据技术有限公司 | 云计算平台告警分析方法、装置、设备及存储介质 |
| CN112804079A (zh) * | 2020-12-10 | 2021-05-14 | 北京浪潮数据技术有限公司 | 云计算平台告警分析方法、装置、设备及存储介质 |
| CN113254668B (zh) * | 2021-06-11 | 2022-02-18 | 云南大学 | 一种基于场景纬度的知识图谱构建方法及系统 |
| CN113254668A (zh) * | 2021-06-11 | 2021-08-13 | 云南大学 | 一种基于场景纬度的知识图谱构建方法及系统 |
| CN114117077A (zh) * | 2021-12-02 | 2022-03-01 | 睿云奇智(重庆)科技有限公司 | 运维知识图谱构建及运维的方法、装置及计算机设备、存储介质 |
| CN114710392A (zh) * | 2022-03-23 | 2022-07-05 | 阿里云计算有限公司 | 事件信息的获取方法及装置 |
| CN114710392B (zh) * | 2022-03-23 | 2024-03-12 | 阿里云计算有限公司 | 事件信息的获取方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109933633B (zh) | 2021-02-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109933633A (zh) | 一种基于时间和场景维度的运维知识图谱构建方法 | |
| EP4060942A1 (en) | Configuration anomaly detection method, server and storage medium | |
| CN108228814B (zh) | 数据同步方法及装置 | |
| US10268961B2 (en) | Generating predictive models to reconfigure electronic devices | |
| CN107659443A (zh) | 一种实时业务的监控方法及其系统 | |
| CN107562883A (zh) | 一种数据同步的方法及系统 | |
| CN108984725A (zh) | 一种跨网闸数据同步方法 | |
| CN112769605B (zh) | 一种异构多云的运维管理方法及混合云平台 | |
| CN112134719A (zh) | 一种分析基站安全日志的方法和系统 | |
| CN112995183A (zh) | 一种互联网路由信息泄漏检测方法 | |
| CN107093119A (zh) | 一种订单信息检测方法、装置及系统 | |
| CN115333966A (zh) | 一种基于拓扑的Nginx日志分析方法、系统及设备 | |
| US20220173980A1 (en) | Ai machine learning technology based fault management system for network equpment that supports sdn open flow protocol | |
| CN103414252A (zh) | 一种变电站通信服务配置信息实时同步系统及其方法 | |
| CN111935202A (zh) | 一种跨电力安全区的实时告警推送移动终端的装置及方法 | |
| CN109379289A (zh) | 路由过滤策略处理方法及装置 | |
| CN107592214B (zh) | 一种识别互联网应用系统登录用户名的方法 | |
| CN111381833B (zh) | 一种容器化的openstack数据初始化方法 | |
| CN104753692A (zh) | 对传输网络进行智能故障定位和派单的方法和系统 | |
| CN111090648B (zh) | 一种关系型数据库数据同步冲突解决方法 | |
| CN114664121B (zh) | 一种可智能纠错的民航气象观测制作发布系统及方法 | |
| CN113392113A (zh) | 一种云视频开放平台精细化用户画像实时推荐方法 | |
| JP2019071014A (ja) | 監視装置およびそのシステム | |
| CN106507228B (zh) | 一种olt pon业务卡实现fdb软表更新的方法 | |
| CN113612721A (zh) | 一种基于电力线载波通信的报文智能分析方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: 100005 20th and 22nd floors, news building, 26 Jianguomennei street, Dongcheng District, Beijing Patentee after: Ruizhi Technology Group Co.,Ltd. Address before: 100102 26th floor, China brocade, green space center, District 4, Wangjing East Garden, Chaoyang District, Beijing Patentee before: BEIJING RAYSDATA CO.,LTD. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230424 Address after: 550025 Room 9-1, Floor 5, Building A2, Country Garden Green Financial Port Project (Plot ZD-14), Huchao Township, Gui'an New District, Guiyang City, Guizhou Province Patentee after: Guizhou Ruizhi Big Data Co.,Ltd. Address before: 100005 20th and 22nd floors, news building, 26 Jianguomennei street, Dongcheng District, Beijing Patentee before: Ruizhi Technology Group Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240426 Address after: No.010, Maker Alliance Headquarters, Guizhou Light Industry Vocational and Technical College, University City, Gui'an New Area, Guiyang City, Guizhou Province, 550000 Patentee after: Guizhou Henghui Xinda Technology Co.,Ltd. Country or region after: China Address before: 550025 Room 9-1, Floor 5, Building A2, Country Garden Green Financial Port Project (Plot ZD-14), Huchao Township, Gui'an New District, Guiyang City, Guizhou Province Patentee before: Guizhou Ruizhi Big Data Co.,Ltd. Country or region before: China |