CN112565007A - 一种系统健康度评价方法及装置 - Google Patents

一种系统健康度评价方法及装置 Download PDF

Info

Publication number
CN112565007A
CN112565007A CN202011352595.9A CN202011352595A CN112565007A CN 112565007 A CN112565007 A CN 112565007A CN 202011352595 A CN202011352595 A CN 202011352595A CN 112565007 A CN112565007 A CN 112565007A
Authority
CN
China
Prior art keywords
evaluation
defining
assessment
score
dimension
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011352595.9A
Other languages
English (en)
Inventor
闵莽锐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhongying Youchuang Information Technology Co Ltd
Original Assignee
Zhongying Youchuang Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhongying Youchuang Information Technology Co Ltd filed Critical Zhongying Youchuang Information Technology Co Ltd
Priority to CN202011352595.9A priority Critical patent/CN112565007A/zh
Publication of CN112565007A publication Critical patent/CN112565007A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3447—Performance evaluation by modeling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3452—Performance evaluation by statistical analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
    • H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic

Abstract

本发明公开一种系统健康度评价方法及装置，其中，该方法包括：规划评估对象类别，定义评估对象，定义评估维度，定义评估项，定义评分模板，定义评估周期，执行评估，输出评估结果以及可视化评估结果。该方法及装置通过构建多维度，可灵活扩展的健康度评价模型，实现网络中设备和系统的健康统一评估，方便管理者和优化人员便捷、高效地掌握网络、系统和设备的健康情况，从而提升全网网络服务质量和网络整体安全度。

Description

一种系统健康度评价方法及装置
技术领域
本发明涉及健康评价体系领域，尤其是一种系统健康度评价方法及装置。
背景技术
在企业专网、局域网或IP承载网中存在众多不同类型的网元，这些网元承担不同的网络功能，例如网络互联、网络安全防护、业务接入和负载均衡等，不同角色的网元只有正常运转和协同工作才能使整个网络和业务功能健康运行。因此，需要一种健康评价体系来评估当前网络和业务功能单元的健康状况，由于影响网络的因素众多且是动态变化的，所以这种评价体系需要能够从多种维度综合进行评判，且可灵活拓展参与评价的因素；同时，既可以从较为微观的设备层面，也可以从较为宏观的系统层面反映当前网络的健康度。网络管理者在获知健康度数据后，可以即时对健康度存在劣化的设备或系统进行整治和优化。
发明内容
针对上述情况，本发明提供一种系统健康度评价方法及装置，通过构建多维度，可灵活扩展的健康度评价模型，实现网络中设备和系统的健康统一评估，方便管理者和优化人员便捷、高效地掌握网络、系统和设备的健康情况，从而提升全网网络服务质量和网络整体安全度。
为实现上述目的，本发明采用下述技术方案：
在本发明一实施例中，提出了一种系统健康度评价方法，该方法包括：
规划评估对象类别：评估对象类别分为基础类别和复合类别，基础类别按网络中的网络元素进行划分，复合类别按端到端业务包含的网络元素进行划分；
定义评估对象：按评估类别实例化具体的评估对象，基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象；
定义评估维度：按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标；
定义评估项：定义各评估维度下包含的评估项目，确定其数据来源和评估方法，同时定义评估项影响范围及处理方法建议；
定义评分模板：为每种评估对象定义评估项、评估项的优先顺序以及评估项的权重；
定义评估周期：为评估对象制定评估调度策略；
执行评估：按评估调度策略和评估算法周期性执行定义好的评估计划；
输出评估结果：将评估结果进行持久化存储或以消息转发方式发送给消费者；
可视化评估结果：将输出的评估结果以大屛、查询统计、实时告警和信息通报的方式进行直观呈现。
进一步地，定义评估对象，包括：
选择网络资源对象；
定义包含的评估项具体内容；
指定评估调度策略和告警策略。
进一步地，定义评估项，包括：
定义评估项名称和描述；
选择适用的资源类型；
指定归属的评估维度；
指定数据来源；
指定评分类型和评分模板；
指定健康度劣化影响范围和处理建议。
进一步地，定义评分模板，包括：
定义评估项名称和描述；
指定评分类型；
定义评分条件，指定不同评分等级对应的判定条件。
进一步地，定义评估周期，包括：
指定调度频次，按周期或指定具体的执行时间；
指定调度的有效起止时间范围，在该范围内才执行评估调度。
进一步地，执行评估，包括：
获取评估对象包含的评估项信息；
采集各评估项的指标数据；
根据评分模板对评估项进行打分；
根据评估模板对评估维度进行打分；
根据评估维度的得分按权重得到评估对象最终得分。
进一步地，评估对象的得分由各评估维度的得分加权求和得到，每个评估维度的得分由其包含的各评估项的得分加权求和得到，其中的加权系数基于历史经验值进行迭代优化。
进一步地，评估维度的得分
Figure BDA0002801723910000041
其中m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数。
进一步地，基础评估对象的得分
Figure BDA0002801723910000042
其中n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数。
在本发明一实施例中，还提出了一种系统健康度评价装置，该装置包括：
评估对象类别规划模块，用于将评估对象类别分为基础类别和复合类别，基础类别按网络中的网络元素进行划分，复合类别按端到端业务包含的网络元素进行划分；
评估对象定义模块，用于按评估类别实例化具体的评估对象，基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象；
评估维度定义模块，用于按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标；
评估项定义模块，用于定义各评估维度下包含的评估项目，确定其数据来源和评估方法，同时定义评估项影响范围及处理方法建议；
评分模板定义模块，用于为每种评估对象定义评估项、评估项的优先顺序以及评估项的权重；
评估周期定义模块，用于为评估对象制定评估调度策略；
评估执行模块，用于按评估调度策略和评估算法周期性执行定义好的评估计划；
评估结果输出模块，用于将评估结果进行持久化存储或以消息转发方式发送给消费者；
评估结果可视化模块，用于将输出的评估结果以大屛、查询统计、实时告警和信息通报的方式进行直观呈现。
进一步地，评估对象定义模块，具体用于：
选择网络资源对象；
定义包含的评估项具体内容；
指定评估调度策略和告警策略。
进一步地，评估项定义模块，具体用于：
定义评估项名称和描述；
选择适用的资源类型；
指定归属的评估维度；
指定数据来源；
指定评分类型和评分模板；
指定健康度劣化影响范围和处理建议。
进一步地，评分模板定义模块，具体用于：
定义评估项名称和描述；
指定评分类型；
定义评分条件，指定不同评分等级对应的判定条件。
进一步地，评估周期定义模块，具体用于：
指定调度频次，按周期或指定具体的执行时间；
指定调度的有效起止时间范围，在该范围内才执行评估调度。
进一步地，评估执行模块，具体用于：
获取评估对象包含的评估项信息；
采集各评估项的指标数据；
根据评分模板对评估项进行打分；
根据评估模板对评估维度进行打分；
根据评估维度的得分按权重得到评估对象最终得分。
进一步地，评估对象的得分由各评估维度的得分加权求和得到，每个评估维度的得分由其包含的各评估项的得分加权求和得到，其中的加权系数基于历史经验值进行迭代优化。
进一步地，评估维度的得分
Figure BDA0002801723910000061
其中m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数。
进一步地，基础评估对象的得分
Figure BDA0002801723910000062
其中n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数。
在本发明一实施例中，还提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现前述系统健康度评价方法。
在本发明一实施例中，还提出了一种计算机可读存储介质，计算机可读存储介质存储有执行系统健康度评价方法的计算机程序。
有益效果：
本发明通过搭建健康度评价模型，定义多维度评价指标，创建了对网络中设备、子系统和系统的全方位及从局部到整体的健康度评价体系，从而系统性地提升了网络隐患的及时捕捉、评估、可视化和处置能力，为持续保障网络质量，优化网络效能提供了有效的手段和便利的途径。
附图说明
图1是本发明一实施例的系统健康度评价方法逻辑示意图；
图2是本发明一实施例的健康度评价模型的组成要素示意图；
图3是本发明一实施例的系统健康度评价装置结构示意图；
图4是本发明一实施例的计算机设备结构示意图。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神，应当理解，给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本公开可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。
根据本发明的实施方式，提出了一种系统健康度评价方法及装置，通过在采集的各类数据中确定影响网络中设备和系统健康度的维度，并进一步确定每个维度下对应的指标参数，再结合这些维度和维度的指标参数建立多维度的健康度评价模型；利用该模型对设备和系统的健康度进行测量和量化评分，得到一个健康度综合得分；通过得分高低标识评估对象的健康程度，总分为10分，得分越高表示健康程度越好。
下面参考本发明的若干代表性实施方式，详细阐释本发明的原理和精神。
图1是本发明一实施例的系统健康度评价方法逻辑示意图。如图1所示，该方法的关键在于搭建健康度评价模型，具体包括以下步骤：
1、规划评估对象类别：评估对象类别分为基础类别和复合类别。基础类别主要按网络中的网络元素进行划分，复合类别主要按端到端业务包含的网络元素进行划分。
基础类别：包括网络设备、安全设备、主机、网络基础设施(DNS、NTP)。
复合类别：包括电路、端到端路径、系统。
2、定义评估对象：按评估类别实例化具体的评估对象。基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象。定义评估对象是从网络元素里筛选出具体需要进行评估的对象，例如具体的路由器、交换机、防火墙等设备。定义评估对象的具体步骤包括：
选择网络资源对象。
定义包含的评估项具体内容。
指定评估调度策略和告警策略。
3、定义评估维度：按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标。评估维度主要从不同侧面反映评估对象的健康状况，一般分为硬件基础、运费负载、配置合规性、路由协议等。定义维度时包括维度名称、维度描述、维度适用的资源类型。
4、定义评估项：定义各评估维度下包含的评估项目，确定其数据来源(指标、巡检项)和评估方法(阈值型、枚举型、关键字型、基线对比型)。可定义评估项影响范围及处理方法建议，以便在健康度劣化时，可查询对应的影响范围及处理方法建议描述。定义评估项的具体步骤包括：
定义评估项名称和描述。
选择适用的资源类型。
指定归属的评估维度。
指定数据来源。
指定评分类型和评分模板。
指定健康度劣化影响范围和处理建议。
5、定义评分模板：为每种评估对象定义评估项、评估项的优先顺序和评估项的权重。在创建新的评估对象时，可以直接引用预定义的评分模板。定义评分模板的具体步骤包括：
定义评估项名称和描述。
指定评分类型。
定义评分条件，可以指定不同评分等级对应的判定条件。
6、定义评估周期：为评估对象制定评估调度策略。例如按小时、天、周等粒度进行评估。定义评估周期的具体步骤包括：
指定调度频次，可以按周期例如每天1次，也可以指定具体的执行时间，例如每天12点执行。
指定调度的有效起止时间范围，在该范围内才执行评估调度。
7、执行评估：按调度策略、评估算法周期性执行定义好的评估计划。执行评估的具体步骤包括：
获取评估对象包含的评估项信息。
采集各评估项的指标数据。
根据评分模板对评估项进行打分。
根据评估模板对评估维度进行打分。
根据评估维度的得分按权重得到评估对象最终得分。
8、输出评估结果：将评估结果进行持久化存储或以消息转发方式发送给消费者。评估结果包括评估对象、评估时间、健康度得分、评估项得分和评估维度得分。
9、可视化评估结果：将输出的评估结果以大屛、查询统计、实时告警和信息通报等方式进行直观呈现。
需要说明的是，尽管在上述实施例及附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。
为了对上述系统健康度评价方法进行更为清楚的解释，下面按功能点描述本方案和特性。
1、创建健康度评价模型
图2是本发明一实施例的健康度评价模型的组成要素示意图。如图2所示，健康度模型由以下要素组成，通过定义这些要素来创建出一个完整的评价模型。
(1)评估对象：网络由各类评估对象组成，针对评估对象或评估对象组合的健康度评估，可局部或整体反映网络的健康度情况。评估对象分为如下2类：
设备：包括网络设备、安全设备、主机、网络基础设施(DNS、NTP)、电路和端到端路径。
系统：将由若干网元组成的子系统或子网络，定义为“系统”，或将“已定义”系统组合成新系统。
(2)评估维度：确定影响评估对象健康情况的维度，每个维度下包含若干评估项指标。
(3)评估项：反映评估对象某一侧面健康状况的参数指标。评估项包括评估项名称、评估数据来源、评分方法、权重等。
(4)评估数据源：需要采集并用于判定评估项得分的底层数据。
(5)评估算法：采用动态权值算法(评估项权重+重要性权重)，通过关联评估对象、评估项指标和分值权重，动态计算评估项指标得分，并按照权重计算评估对象的最终得分。运行中可逐步迭代、完善。
(6)评估结果可视化：执行评估，得到健康度评分后，要以可视化的方式直观、有效地呈现出来，以便快速把握整体健康度、定位健康度劣化的评估对象位置并进行相应处置。
2、健康度评分算法
评估对象得分由各评估维度的得分加权求和得到，而每个评估维度的得分由其包含的各评估项的得分加权求和得到。其中的加权系数可基于历史经验值进行迭代优化。
评估维度得分计算方法：由该维度下各评估项得分与权重系数相乘并求和得到。m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数，D表示评估维度最终得分。
Figure BDA0002801723910000121
基础评估对象得分计算方法：由该对象各评估维度得分与权重系数相乘并求和得到。n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数，H表示评估对象最终得分。
Figure BDA0002801723910000122
系统评估对象得分计算方法与基础评估对象得分计算方法相同，只是增加了组成设备作为一个单独的维度。
3、评估维度与评估项
评估对象评估项列举如下表1和下表2，可按照需要进行添加。创建评估对象时，默认可采用预先定义好的评分模板。
表1基础对象评估项列表
Figure BDA0002801723910000131
Figure BDA0002801723910000141
表2系统对象评估项列表
Figure BDA0002801723910000142
4、评估项评分方法
采用下表3的几类方法作为评估项的打分机制。
表3评估项评分方法列表
Figure BDA0002801723910000151
5、健康度可视化
从如下几个方面对健康度得分进行发布及可视化呈现。
(1)健康度劣化实时告警
定义健康度告警：针对健康度评估得分数据，可按评估对象的重要程度，针对健康度阈值区间定义不同的告警级别。例如，当健康度评分都为5时，A对象的告警级别为紧急、B对象的告警级别为次要。
当健康度劣化时系统发出告警，在告警面板上实时呈现，进而可进行短信或邮件通知以及其他告警处理操作。
(2)健康度查询统计
可以按评估对象和评估时间查询健康度得分，进而可下钻查看每个评估对象评估维度+评估项的评分详情。
可按时间范围和健康度分值范围统计评估对象个数，进而可下钻评估对象的评分详情。
按区域展示健康度总体情况，包括健康度排名、健康度地图渲染、健康度近一周趋势和健康度优劣区间占比。
(3)健康度影响分析
对于设备健康度，在健康度劣化时，可直接进行拓扑定位，将该设备在拓扑图上进行醒目呈现。
选中劣化设备，点击右键菜单“查看影响范围”，可查询对应的影响范围及处理方法建议描述。
基于同一发明构思，本发明还提出一种系统健康度评价装置。该装置的实施可以参见上述方法的实施，重复之处不再赘述。以下所使用的术语“模块”，可以是实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图3是本发明一实施例的系统健康度评价装置结构示意图。如图3所示，该装置包括：
评估对象类别规划模块101，用于将评估对象类别分为基础类别和复合类别，基础类别按网络中的网络元素进行划分，复合类别按端到端业务包含的网络元素进行划分；
评估对象定义模块102，用于按评估类别实例化具体的评估对象，基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象；具体用于：
选择网络资源对象；
定义包含的评估项具体内容；
指定评估调度策略和告警策略；
评估维度定义模块103，用于按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标；
评估项定义模块104，用于定义各评估维度下包含的评估项目，确定其数据来源和评估方法，同时定义评估项影响范围及处理方法建议；具体用于：
定义评估项名称和描述；
选择适用的资源类型；
指定归属的评估维度；
指定数据来源；
指定评分类型和评分模板；
指定健康度劣化影响范围和处理建议；
评分模板定义模块105，用于为每种评估对象定义评估项、评估项的优先顺序以及评估项的权重；具体用于：
定义评估项名称和描述；
指定评分类型；
定义评分条件，指定不同评分等级对应的判定条件。
进一步地，评估周期定义模块，具体用于：
指定调度频次，按周期或指定具体的执行时间；
指定调度的有效起止时间范围，在该范围内才执行评估调度；
评估周期定义模块106，用于为评估对象制定评估调度策略；
评估执行模块107，用于按评估调度策略和评估算法周期性执行定义好的评估计划；具体用于：
获取评估对象包含的评估项信息；
采集各评估项的指标数据；
根据评分模板对评估项进行打分；
根据评估模板对评估维度进行打分；
根据评估维度的得分按权重得到评估对象最终得分；
评估对象的得分由各评估维度的得分加权求和得到，每个评估维度的得分由其包含的各评估项的得分加权求和得到，其中的加权系数基于历史经验值进行迭代优化；
评估维度的得分
Figure BDA0002801723910000181
其中m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数；
基础评估对象的得分
Figure BDA0002801723910000182
其中n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数；
评估结果输出模块108，用于将评估结果进行持久化存储或以消息转发方式发送给消费者；
评估结果可视化模块109，用于将输出的评估结果以大屛、查询统计、实时告警和信息通报的方式进行直观呈现。
应当注意，尽管在上文详细描述中提及了系统健康度评价装置的若干模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多模块的特征和功能可以在一个模块中具体化。反之，上文描述的一个模块的特征和功能可以进一步划分为由多个模块来具体化。
基于前述发明构思，如图4所示，本发明还提出一种计算机设备200，包括存储器210、处理器220及存储在存储器210上并可在处理器220上运行的计算机程序230，处理器220执行计算机程序230时实现前述系统健康度评价方法。
基于前述发明构思，本发明还提出一种计算机可读存储介质，计算机可读存储介质存储有执行前述系统健康度评价方法的计算机程序。
本发明提出的系统健康度评价方法及装置，通过搭建健康度评价模型和定义多维度评价指标，创建了对网络中设备、子系统和系统的的全方位即从局部到整体的健康度评价体系，从而系统性地提升了网络隐患的及时捕捉、评估、可视化和处置能力，为持续保障网络质量、优化网络效能提供了有效的手段和便利的途径，最终达成的目标包括：
健康度评价模型的可拓展性：可以根据网络实际情况，调整评估对象类型、评估维度、评估指标和评估算法。
评估结果的可视化：可通过多种手段呈现评估结果，从而提升对网络健康隐患的处置能力和处置效率。
完善数据采集种类：为了有效评估健康度，加强和丰富了对配置数据、性能数据、故障数据、配置合规化数据、安全隐患数据、运行效能数据等多种数据种类的收集、处理和集中化管理。
虽然已经参考若干具体实施方式描述了本发明的精神和原理，但是应该理解，本发明并不限于所公开的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合以进行受益，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包含的各种修改和等同布置。
对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (20)

1.一种系统健康度评价方法，其特征在于，该方法包括：
规划评估对象类别：评估对象类别分为基础类别和复合类别，基础类别按网络中的网络元素进行划分，复合类别按端到端业务包含的网络元素进行划分；
定义评估对象：按评估类别实例化具体的评估对象，基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象；
定义评估维度：按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标；
定义评估项：定义各评估维度下包含的评估项目，确定其数据来源和评估方法，同时定义评估项影响范围及处理方法建议；
定义评分模板：为每种评估对象定义评估项、评估项的优先顺序以及评估项的权重；
定义评估周期：为评估对象制定评估调度策略；
执行评估：按评估调度策略和评估算法周期性执行定义好的评估计划；
输出评估结果：将评估结果进行持久化存储或以消息转发方式发送给消费者；
可视化评估结果：将输出的评估结果以大屛、查询统计、实时告警和信息通报的方式进行直观呈现。
2.根据权利要求1所述的系统健康度评价方法，其特征在于，定义评估对象，包括：
选择网络资源对象；
定义包含的评估项具体内容；
指定评估调度策略和告警策略。
3.根据权利要求1所述的系统健康度评价方法，其特征在于，定义评估项，包括：
定义评估项名称和描述；
选择适用的资源类型；
指定归属的评估维度；
指定数据来源；
指定评分类型和评分模板；
指定健康度劣化影响范围和处理建议。
4.根据权利要求1所述的系统健康度评价方法，其特征在于，定义评分模板，包括：
定义评估项名称和描述；
指定评分类型；
定义评分条件，指定不同评分等级对应的判定条件。
5.根据权利要求1所述的系统健康度评价方法，其特征在于，定义评估周期，包括：
指定调度频次，按周期或指定具体的执行时间；
指定调度的有效起止时间范围，在该范围内才执行评估调度。
6.根据权利要求1所述的系统健康度评价方法，其特征在于，执行评估，包括：
获取评估对象包含的评估项信息；
采集各评估项的指标数据；
根据评分模板对评估项进行打分；
根据评估模板对评估维度进行打分；
根据评估维度的得分按权重得到评估对象最终得分。
7.根据权利要求1所述的系统健康度评价方法，其特征在于，所述评估对象的得分由各评估维度的得分加权求和得到，每个评估维度的得分由其包含的各评估项的得分加权求和得到，其中的加权系数基于历史经验值进行迭代优化。
8.根据权利要求1所述的系统健康度评价方法，其特征在于，所述评估维度的得分
Figure FDA0002801723900000031
其中m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数。
9.根据权利要求1所述的系统健康度评价方法，其特征在于，所述基础评估对象的得分
Figure FDA0002801723900000032
其中n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数。
10.一种系统健康度评价装置，其特征在于，该装置包括：
评估对象类别规划模块，用于将评估对象类别分为基础类别和复合类别，基础类别按网络中的网络元素进行划分，复合类别按端到端业务包含的网络元素进行划分；
评估对象定义模块，用于按评估类别实例化具体的评估对象，基础类别实例化后的对象称为基础对象，复合类别实例化后的对象称为复合对象；
评估维度定义模块，用于按对象类别定义不同的评估维度，表征评估对象某一方面的健康指标；
评估项定义模块，用于定义各评估维度下包含的评估项目，确定其数据来源和评估方法，同时定义评估项影响范围及处理方法建议；
评分模板定义模块，用于为每种评估对象定义评估项、评估项的优先顺序以及评估项的权重；
评估周期定义模块，用于为评估对象制定评估调度策略；
评估执行模块，用于按评估调度策略和评估算法周期性执行定义好的评估计划；
评估结果输出模块，用于将评估结果进行持久化存储或以消息转发方式发送给消费者；
评估结果可视化模块，用于将输出的评估结果以大屛、查询统计、实时告警和信息通报的方式进行直观呈现。
11.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估对象定义模块，具体用于：
选择网络资源对象；
定义包含的评估项具体内容；
指定评估调度策略和告警策略。
12.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估项定义模块，具体用于：
定义评估项名称和描述；
选择适用的资源类型；
指定归属的评估维度；
指定数据来源；
指定评分类型和评分模板；
指定健康度劣化影响范围和处理建议。
13.根据权利要求1所述的系统健康度评价装置，其特征在于，所述评分模板定义模块，具体用于：
定义评估项名称和描述；
指定评分类型；
定义评分条件，指定不同评分等级对应的判定条件。
14.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估周期定义模块，具体用于：
指定调度频次，按周期或指定具体的执行时间；
指定调度的有效起止时间范围，在该范围内才执行评估调度。
15.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估执行模块，具体用于：
获取评估对象包含的评估项信息；
采集各评估项的指标数据；
根据评分模板对评估项进行打分；
根据评估模板对评估维度进行打分；
根据评估维度的得分按权重得到评估对象最终得分。
16.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估对象的得分由各评估维度的得分加权求和得到，每个评估维度的得分由其包含的各评估项的得分加权求和得到，其中的加权系数基于历史经验值进行迭代优化。
17.根据权利要求10所述的系统健康度评价装置，其特征在于，所述评估维度的得分
Figure FDA0002801723900000061
其中m表示评估项的个数，Ij表示第j个评估项的得分，Kj表示第j个评估项的权重系数。
18.根据权利要求10所述的系统健康度评价装置，其特征在于，所述基础评估对象的得分
Figure FDA0002801723900000062
其中n表示评估维度的个数，Di表示第i个维度的得分，Ti表示第i个维度的权重系数。
19.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-9任一项所述方法。
20.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1-9任一项所述方法的计算机程序。
CN202011352595.9A 2020-11-27 2020-11-27 一种系统健康度评价方法及装置 Pending CN112565007A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011352595.9A CN112565007A (zh) 2020-11-27 2020-11-27 一种系统健康度评价方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011352595.9A CN112565007A (zh) 2020-11-27 2020-11-27 一种系统健康度评价方法及装置

Publications (1)

Publication Number Publication Date
CN112565007A true CN112565007A (zh) 2021-03-26

Family

ID=75046037

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011352595.9A Pending CN112565007A (zh) 2020-11-27 2020-11-27 一种系统健康度评价方法及装置

Country Status (1)

Country Link
CN (1) CN112565007A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407432A (zh) * 2021-07-15 2021-09-17 中国建设银行股份有限公司 一种评估应用系统健康度的方法及装置
CN114024820A (zh) * 2021-09-24 2022-02-08 北京华控智加科技有限公司 一种设备健康画像方法
CN114911683A (zh) * 2022-06-21 2022-08-16 北京同创永益科技发展有限公司 一种Kubernetes平台健康度的评测方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104320795A (zh) * 2014-10-17 2015-01-28 四川公用信息产业有限责任公司 一种多维度的无线网络健康度评估方法
WO2018176874A1 (zh) * 2017-04-01 2018-10-04 北京神州绿盟信息安全科技股份有限公司 一种dns的评价方法和装置
CN109800941A (zh) * 2018-12-05 2019-05-24 广州供电局有限公司 能源互联网的评估系统
CN111126631A (zh) * 2019-11-15 2020-05-08 中盈优创资讯科技有限公司 网络健康判定方法及装置
CN111680863A (zh) * 2020-04-26 2020-09-18 南京南数数据运筹科学研究院有限公司 基于层次分析法的网络环境安全状况评估方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104320795A (zh) * 2014-10-17 2015-01-28 四川公用信息产业有限责任公司 一种多维度的无线网络健康度评估方法
WO2018176874A1 (zh) * 2017-04-01 2018-10-04 北京神州绿盟信息安全科技股份有限公司 一种dns的评价方法和装置
CN109800941A (zh) * 2018-12-05 2019-05-24 广州供电局有限公司 能源互联网的评估系统
CN111126631A (zh) * 2019-11-15 2020-05-08 中盈优创资讯科技有限公司 网络健康判定方法及装置
CN111680863A (zh) * 2020-04-26 2020-09-18 南京南数数据运筹科学研究院有限公司 基于层次分析法的网络环境安全状况评估方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407432A (zh) * 2021-07-15 2021-09-17 中国建设银行股份有限公司 一种评估应用系统健康度的方法及装置
CN113407432B (zh) * 2021-07-15 2024-02-23 中国建设银行股份有限公司 一种评估应用系统健康度的方法及装置
CN114024820A (zh) * 2021-09-24 2022-02-08 北京华控智加科技有限公司 一种设备健康画像方法
CN114024820B (zh) * 2021-09-24 2024-04-16 北京华控智加科技有限公司 一种设备健康画像方法
CN114911683A (zh) * 2022-06-21 2022-08-16 北京同创永益科技发展有限公司 一种Kubernetes平台健康度的评测方法

Similar Documents

Publication Publication Date Title
CN112565007A (zh) 一种系统健康度评价方法及装置
US20110191138A1 (en) Risk scorecard
CN102447570A (zh) 一种基于健康度分析的监控装置及方法
CN110581773A (zh) 一种自动化服务监控与报警管理系统
DE102022201746A1 (de) Verwaltung von rechenzentren mit maschinellem lernen
KR101823932B1 (ko) 기업역량 진단 시스템
CN110162445A (zh) 基于主机日志及性能指标的主机健康评价方法及装置
US9195535B2 (en) Hotspot identification
Timonen et al. Situational awareness and information collection from critical infrastructure
Petersen et al. Node removal in criminal networks
Klement et al. Using SOM in the performance monitoring of the emergency call-taking system
CN113505980A (zh) 智能交通管理系统可靠性评价方法、装置及系统
CN111343143B (zh) 数据识别方法、装置及存储介质
Levine et al. Causal Pathways Leading to Human Failure Events in Information-Gathering System Response Activities
CN113824744B (zh) 业务视角的态势感知可视化方法、系统和存储介质
CN114726649B (zh) 态势感知的评价方法、装置、终端设备和存储介质
CN112785276B (zh) 一种工程咨询管理系统及方法
CN109739719A (zh) 一种通信机房基础设施管理方法及装置
Matta et al. A dashboard for cyber situational awareness and decision support in network security management
CN106156079A (zh) 日志数据处理方法和装置
Bazrafkan et al. National cyber situation awareness model
Chechulin et al. Visual analytics for improving efficiency of network forensics: account theft investigation
Kostadinov et al. Reducing the number of incidents in converged IT infrastructure using correlation approach
Minor et al. Confidence in workflow adaptation
Stolze et al. Visual problem-solving support for new event triage in centralized network security monitoring: Challenges, tools and benefits

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210326

RJ01 Rejection of invention patent application after publication