CN109933633B - 一种基于时间和场景维度的运维知识图谱构建方法 - Google Patents
一种基于时间和场景维度的运维知识图谱构建方法 Download PDFInfo
- Publication number
- CN109933633B CN109933633B CN201910263048.4A CN201910263048A CN109933633B CN 109933633 B CN109933633 B CN 109933633B CN 201910263048 A CN201910263048 A CN 201910263048A CN 109933633 B CN109933633 B CN 109933633B
- Authority
- CN
- China
- Prior art keywords
- alarm
- time
- entity
- data
- topology
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 19
- 238000010276 construction Methods 0.000 title claims abstract description 11
- 238000000034 method Methods 0.000 claims abstract description 10
- 238000013507 mapping Methods 0.000 claims description 3
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013070 change management Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及信息技术领域，特别是一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，a、构建一个分布式的消息中间件；b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化；c、将接收到的告警码等信息进行数据格式化；d、形成一个告警知识族谱；e、重复c、d步骤；f、展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。采用上述方法后，本发明通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑；当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
Description
技术领域
本发明涉及信息技术领域，特别是一种基于时间和场景维度的运维知识图谱构建方法。
背景技术
知识图谱能提供高质量的结构化数据，目前已经广泛地应用于人工智能的多个领域，例如自动问答、搜索引擎以及信息抽取。典型的知识图谱通常以三元组的形式表示-(头实体，关系，尾实体)，例如(姚明，国籍，中国)反映了姚明的国籍是中国这件事实。然而，大多数现有的知识图谱都是以半自动或者人工的方式构建，因此存在两个问题：(1)不完整，知识图谱中很多实体之间潜在的关系没有被挖掘；(2)扩展性较差，不能自动地向知识图谱中添加新实体。
现有的运维知识图谱主要以CMDB和运维知识库为主，通过自动丰富运维知识，形成企业专有的运维知识库。以CMDB为核心构建的配置变更管理库，需要依托于变更流程对配置进行变化，不是实时更新的机制，无法适应容器以及云环境(容器环境和云环境，资源之间的关系是完全动态的，是系统自动调整的)。传统配置变更的拓扑不是时序化的，无法根据故障时间找出对应的拓扑。传统的运维知识是静态的，单一的，平面化的展现，即一个告警码的描述和处理建议是唯一的，但在实际运维工作中，该告警码根据不同业务，不同环境，出现的原因会存在差异性，因此现有的模式延缓了故障定位和故障解决的时间。
发明内容
本发明需要解决的技术问题是提供一种支持场景的可扩展性，拓扑的时序性构建立体化的运维知识图谱方法。
为解决上述技术问题，本发明的一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，
a、构建一个分布式的消息中间件；
b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中；
c、通过从分布式的消息中间件中接收到的告警码信息进行数据格式化；
d、当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔范围在X分钟内，X为可定义的参数，即将新的告警码与之前收到的告警码进行关联映射，形成一个告警知识族谱；
e、如果新的告警码时间间隔超过设置的时间范围，即标识该告警码为新的告警知识族谱，重复c、d步骤；
f、通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
优选的，步骤a中，构建一个分布式的消息中间件，能够通过JSON及其他多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
优选的，步骤b中，通过格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中。
优选的，步骤b中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
优选的，步骤c中，告警码消息中包含时间和告警码两个信息，数据接收消息的接口继续等待。
采用上述方法后，本发明通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑；当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细的说明。
图1为本发明一种基于时间和场景维度的运维知识图谱构建方法的流程图。
具体实施方式
如图1所示，本发明的一种基于时间和场景维度的运维知识图谱构建方法，包括以下步骤，
a.构建一个分布式的消息中间件，能够通过JSON及其他多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
b.通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
c.通过从分布式的消息中间件中接收到的告警码等信息进行数据格式化，告警码消息中一定包含时间和告警码两个信息，数据接收消息的接口继续等待。
d.当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔范围在X分钟内，X为可定义的参数，即将新的告警码与之前收到的告警码进行关联映射，形成一个告警知识族谱。
e.如果新的告警码时间间隔超过X分钟，即标识该告警码为新的告警知识族谱，重复c、d步骤。
f.通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
通过时序化的实体拓扑，能够适应云和容器等配置自动变更且变更频繁的环境，当出现故障时，能够快速找到故障当前时间点的业务拓扑。当告警出现时，即与实体构建链接关系，将告警与不同业务区分，当故障发生时，能够快速找到告警族谱，帮助快速找到问题根源，加速解决过程。
虽然以上描述了本发明的具体实施方式，但是本领域熟练技术人员应当理解，这些仅是举例说明，可以对本实施方式作出多种变更或修改，而不背离本发明的原理和实质，本发明的保护范围仅由所附权利要求书限定。
Claims (5)
1.一种基于时间和场景维度的运维知识图谱构建方法，其特征在于，包括以下步骤，
a、构建一个分布式的消息中间件；
b、通过从分布式的消息中间件中接收到的配置消息进行数据格式化，格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中；
c、通过从分布式的消息中间件中接收到的告警码信息进行数据格式化；
d、当有新的告警码消息出现，并能够和b步骤的拓扑对应起来，且两条告警的时间间隔范围在X分钟内，X为可定义的参数，即将新的告警码与之前收到的告警码进行关联映射，形成一个告警知识族谱；
e、如果新的告警码时间间隔超过设置的时间范围，即标识该告警码为新的告警知识族谱，重复c、d步骤；
f、通过图形数据库的方式展示实体与实体之间的链接关系，同时能够看到实体拓扑关联的告警知识族谱。
2.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤a中，构建一个分布式的消息中间件，能够通过JSON及其他多种数据格式接收各种类型的消息，数据字段类型不限，可由数据提供方自动扩展。
3.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤b中，通过格式化实体链接关系，以及实体的属性关系，能够根据实体的链接关系自动生成图，并将实体的属性关系保存到图数据库中。
4.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤b中，如果图数据中已有关系拓扑，对已有关系拓扑进行镜像保存，保存N个历史版本，N为可配置的参数，同时将关系描述文件保存到时序数据中，同时进行时间戳标记，时间戳细化到毫秒。
5.按照权利要求1所述的一种基于时间和场景维度的运维知识图谱构建方法，其特征在于：步骤c中，告警码消息中包含时间和告警码两个信息，数据接收消息的接口继续等待。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910263048.4A CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910263048.4A CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109933633A CN109933633A (zh) | 2019-06-25 |
| CN109933633B true CN109933633B (zh) | 2021-02-05 |
Family
ID=66989081
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910263048.4A Active CN109933633B (zh) | 2019-04-02 | 2019-04-02 | 一种基于时间和场景维度的运维知识图谱构建方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109933633B (zh) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110609927B (zh) * | 2019-09-24 | 2022-02-15 | 厦门市美亚柏科信息股份有限公司 | 一种可视化家谱布局方法、终端设备及存储介质 |
| CN111221702B (zh) * | 2019-11-18 | 2024-02-27 | 上海维谛信息科技有限公司 | 基于日志分析的异常处理方法、系统、终端及介质 |
| CN111352759B (zh) * | 2019-12-31 | 2024-04-02 | 杭州亚信软件有限公司 | 一种告警根因的判定方法及装置 |
| CN111523122B (zh) * | 2020-01-17 | 2024-05-17 | 中国银联股份有限公司 | 回溯安全边界的配置的方法和系统 |
| CN112804079B (zh) * | 2020-12-10 | 2023-04-07 | 北京浪潮数据技术有限公司 | 云计算平台告警分析方法、装置、设备及存储介质 |
| CN113254668B (zh) * | 2021-06-11 | 2022-02-18 | 云南大学 | 一种基于场景纬度的知识图谱构建方法及系统 |
| CN114117077B (zh) * | 2021-12-02 | 2023-01-31 | 睿云奇智(重庆)科技有限公司 | 运维知识图谱构建及运维的方法、装置及计算机设备、存储介质 |
| CN114710392B (zh) * | 2022-03-23 | 2024-03-12 | 阿里云计算有限公司 | 事件信息的获取方法及装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1242897A (zh) * | 1997-10-28 | 2000-01-26 | 国际商业机器公司 | 多存取计算机通信系统及其通信方法 |
| CN102523126A (zh) * | 2011-12-29 | 2012-06-27 | 深圳市同洲视讯传媒有限公司 | 一种告警事件发送方法及装置 |
| CN107103100A (zh) * | 2017-06-10 | 2017-08-29 | 海南大学 | 一种投入驱动的容错的基于数据图谱、信息图谱和知识图谱架构的智能语义搜索方法 |
| CN107633044A (zh) * | 2017-09-14 | 2018-01-26 | 国家计算机网络与信息安全管理中心 | 一种基于热点事件的舆情知识图谱构建方法 |
| CN107704637A (zh) * | 2017-11-20 | 2018-02-16 | 中国人民解放军国防科技大学 | 一种面向突发事件的知识图谱构建方法 |
| CN109086347A (zh) * | 2018-07-13 | 2018-12-25 | 武汉尼维智能科技有限公司 | 一种国际海运危险货物知识图谱系统的构建方法、装置及存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10503832B2 (en) * | 2016-07-29 | 2019-12-10 | Rovi Guides, Inc. | Systems and methods for disambiguating a term based on static and temporal knowledge graphs |
-
2019
- 2019-04-02 CN CN201910263048.4A patent/CN109933633B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1242897A (zh) * | 1997-10-28 | 2000-01-26 | 国际商业机器公司 | 多存取计算机通信系统及其通信方法 |
| CN102523126A (zh) * | 2011-12-29 | 2012-06-27 | 深圳市同洲视讯传媒有限公司 | 一种告警事件发送方法及装置 |
| CN107103100A (zh) * | 2017-06-10 | 2017-08-29 | 海南大学 | 一种投入驱动的容错的基于数据图谱、信息图谱和知识图谱架构的智能语义搜索方法 |
| CN107633044A (zh) * | 2017-09-14 | 2018-01-26 | 国家计算机网络与信息安全管理中心 | 一种基于热点事件的舆情知识图谱构建方法 |
| CN107704637A (zh) * | 2017-11-20 | 2018-02-16 | 中国人民解放军国防科技大学 | 一种面向突发事件的知识图谱构建方法 |
| CN109086347A (zh) * | 2018-07-13 | 2018-12-25 | 武汉尼维智能科技有限公司 | 一种国际海运危险货物知识图谱系统的构建方法、装置及存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| "Ship Scheduling in Inland Waterway Networks Based on Cellular Automata Graph";Xiongfei Geng;《International Conference on Cyber-Enabled Distributed Computing and Knowledge Discovery, CyberC》;20170228;第450-453页 * |
| "调度自动化系统知识图谱的构建与应用";李新鹏 等;《中国电力》;20190228;第52卷(第2期);第70-77页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109933633A (zh) | 2019-06-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109933633B (zh) | 一种基于时间和场景维度的运维知识图谱构建方法 | |
| CN108228814B (zh) | 数据同步方法及装置 | |
| CN106250543B (zh) | 一种自动化数据查询同步存储方法 | |
| CN115599870B (zh) | 基于消息队列的存量数据与增量数据融合的数据同步方法 | |
| US8001150B2 (en) | Device management method using nodes having additional attribute and device management client thereof | |
| CN111352759A (zh) | 一种告警根因的判定方法及装置 | |
| CN110838944A (zh) | 一种云中心租户维度拓扑图的实现方法 | |
| CN112597249A (zh) | 一种业务数据的同步分发存储方法及系统 | |
| CN115098567B (zh) | 一种基于bi平台的低代码平台数据传输方法 | |
| CN111355802A (zh) | 信息推送方法和装置 | |
| CN113656407A (zh) | 一种数据拓扑生成方法、装置、电子设备及存储介质 | |
| CN110445667B (zh) | 一种链路延迟检测方法、装置、存储介质以及终端 | |
| CN113076186B (zh) | 任务处理的方法、装置、电子设备和存储介质 | |
| CN109033157B (zh) | 一种基于自定义搜索条件树的复杂数据检索方法和系统 | |
| CN114579668A (zh) | 一种数据库数据同步方法 | |
| CN116501375A (zh) | 数据字典版本管理方法、装置、计算机设备及存储介质 | |
| CN116383207A (zh) | 一种数据标签管理方法、装置、电子设备和存储介质 | |
| CN107168822B (zh) | Oracle streams的异常修复系统及方法 | |
| CN114553970A (zh) | 一种基于Kafka分布式消息处理方法及数据总线系统 | |
| US8839114B1 (en) | System, method, and computer program for generating a graphical representation of at least a portion of a synchronized network model | |
| CN109426947B (zh) | 一种基于树状虚拟节点网络的企业信息交互系统 | |
| CN106897365B (zh) | 数据处理方法及装置 | |
| CN114791933B (zh) | 一种主数据处理方法、基于主数据的交互方法和系统 | |
| CN114124682B (zh) | 监控方法及监控系统 | |
| CN114936300B (zh) | 用于激光切管机电气设计辅助系统的清单生成方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 100005 20th and 22nd floors, news building, 26 Jianguomennei street, Dongcheng District, Beijing Patentee after: Ruizhi Technology Group Co.,Ltd. Address before: 100102 26th floor, China brocade, green space center, District 4, Wangjing East Garden, Chaoyang District, Beijing Patentee before: BEIJING RAYSDATA CO.,LTD. |
|
| CP03 | Change of name, title or address | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230424 Address after: 550025 Room 9-1, Floor 5, Building A2, Country Garden Green Financial Port Project (Plot ZD-14), Huchao Township, Gui'an New District, Guiyang City, Guizhou Province Patentee after: Guizhou Ruizhi Big Data Co.,Ltd. Address before: 100005 20th and 22nd floors, news building, 26 Jianguomennei street, Dongcheng District, Beijing Patentee before: Ruizhi Technology Group Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240426 Address after: No.010, Maker Alliance Headquarters, Guizhou Light Industry Vocational and Technical College, University City, Gui'an New Area, Guiyang City, Guizhou Province, 550000 Patentee after: Guizhou Henghui Xinda Technology Co.,Ltd. Country or region after: China Address before: 550025 Room 9-1, Floor 5, Building A2, Country Garden Green Financial Port Project (Plot ZD-14), Huchao Township, Gui'an New District, Guiyang City, Guizhou Province Patentee before: Guizhou Ruizhi Big Data Co.,Ltd. Country or region before: China |
|
| TR01 | Transfer of patent right |