CN109714201A - 网络系统可靠性评估方法、装置、计算机设备和存储介质 - Google Patents

网络系统可靠性评估方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN109714201A
CN109714201A CN201811577373.XA CN201811577373A CN109714201A CN 109714201 A CN109714201 A CN 109714201A CN 201811577373 A CN201811577373 A CN 201811577373A CN 109714201 A CN109714201 A CN 109714201A
Authority
CN
China
Prior art keywords
test
network system
data
function items
test period
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811577373.XA
Other languages
English (en)
Other versions
CN109714201B (zh
Inventor
杨洪旗
潘勇
方子豪
刘宇婕
张玲杰
聂国健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Electronic Product Reliability and Environmental Testing Research Institute
Original Assignee
China Electronic Product Reliability and Environmental Testing Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Electronic Product Reliability and Environmental Testing Research Institute filed Critical China Electronic Product Reliability and Environmental Testing Research Institute
Priority to CN201811577373.XA priority Critical patent/CN109714201B/zh
Publication of CN109714201A publication Critical patent/CN109714201A/zh
Application granted granted Critical
Publication of CN109714201B publication Critical patent/CN109714201B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本申请涉及一种网络系统可靠性评估方法、装置、计算机设备和存储介质。方法包括:获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息,根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系,获取功能信息集合中的功能项对应的试验时间数据,根据映射关系与试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下对网络系统的影响,进行不同运行状态下的可靠性的定量评估,提高了评估的准确性。

Description

网络系统可靠性评估方法、装置、计算机设备和存储介质
技术领域
本申请涉及可靠性评估技术领域,特别是涉及一种网络系统可靠性评估方法、装置、计算机设备和存储介质。
背景技术
随着网络技术和信息化技术的快速发展,随着高科技信息技术的发展,网络系统已经融入我们生活的每一个角落。
随着人们赖以生存的网络系统的规模越来越庞大,结构越来越复杂,整个网络系统就更容易发生故障或失效,有时看似微不足道的事故隐患就有可能诱发整个网络系统的崩溃和瘫痪。
然而,传统技术对于网络系统的可靠性评估的研究,大多数集中在对连通可靠性的研究,主要是根据单个产品任务剖面对系统的可靠性进行分析评估,在考虑任务及网络系统业务等条件下的网络系统可靠性评估方法方面,在设计阶段对网络系统可靠性进行初步估计,在实物产品还未形成之前,借助数字模型仿真对网络系统可靠性水平进行仿真评估,但仿真结果依赖于模型和剖面的准确性,导致可靠性评估结果存在一定的误差,评估准确性不高。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高可靠性评估准确性的网络系统可靠性评估方法、装置、计算机设备和存储介质。
一种网络系统可靠性评估方法,所述方法包括:
获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
获取所述功能信息集合中的功能项对应的试验时间数据;
根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
在其中一个实施例中,所述获取所述功能信息集合中的功能项对应的试验时间数据包括:
获取同一所述功能项对应的多个试验类型的试验记录数据;
根据所述试验记录数据,获得所述试验类型的试验时间数据,统计各所述试验类型的试验时间数据,得到所述功能项对应的试验时间数据。
在其中一个实施例中,所述根据所述试验记录数据,获得所述试验类型的试验时间数据,统计各所述试验类型的试验时间数据,得到所述功能项对应的试验时间数据包括:
根据所述试验记录数据中的记录时间点,计算所述试验类型的试验时间数据,所述试验类型包括软件测试试验与硬件测试试验,所述试验时间数据的数据类别包括等效试验时间和等效非正常运行时间;
根据所述试验时间数据的数据类别,累计所述软件测试试验与所述硬件测试试验中相同数据类别的所述试验时间数据,得到所述功能项对应的试验时间数据。
在其中一个实施例中,所述根据所述试验记录数据中的记录时间点,计算所述试验类型的试验时间数据包括:
获取所述试验类型对应的环境影响因子;
根据所述试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据;
根据所述有效试验时间数据、所述有效非正常运行时间数据以及所述环境影响因子,计算所述试验类型的等效试验时间和等效非正常运行时间。
在其中一个实施例中,获取所述试验类型对应的环境影响因子包括:
根据所述试验类型对应的试验环境条件,查找预设的环境影响因子数据表;
根据对所述预设的环境影响因子数据表的查找结果,得到所述试验类型对应的环境影响因子。
在其中一个实施例中,所述试验时间数据包括等效试验时间和等效非正常运行时间;所述根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述网络系统可靠性评估参数的评估值包括:
根据所述映射关系,确定所述运行状态下所述预设网络系统可靠性评估参数对应的功能项;
累计所述功能项对应的试验时间数据,得到所述运行状态下的累计等效试验时间和累计等效非正常运行时间;
根据所述累计等效试验时间和所述累计等效非正常运行时间,计算所述运行状态下的等效正常运行时间;
计算所述累计等效正常运行时间在所述累计等效试验时间中的占比,确定所述运行状态下所述预设网络系统可靠性评估参数的评估值。
在其中一个实施例中,所述获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息之前,还包括:
根据网络系统运行要求,划分运行状态,并统计所述网络系统在各所述运行状态下需运行的功能项;
根据所述网络系统在各所述运行状态下需运行的功能项的统计结果,确定各功能项对所述网络系统的运行状态影响信息。
一种网络系统可靠性评估装置,所述装置包括:
信息获取模块,用于获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
映射关系建立模块,用于根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
试验时间数据获取模块,用于获取所述功能信息集合中的功能项对应的试验时间数据;
可靠性评估模块,用于根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
获取所述功能信息集合中的功能项对应的试验时间数据;
根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
获取所述功能信息集合中的功能项对应的试验时间数据;
根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
上述网络系统可靠性评估方法、装置、计算机设备和存储介质,通过获取网络系统的功能信息集合中的功能项对网络系统的运行状态影响信息,建立在各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,通过获取功能信息集合中的功能项对应的试验时间数据,根据映射关系,可以确定各运行状态下对应的功能项,根据功能项对应的试验时间数据,计算对应运行状态下预设网络系统可靠性评估参数的评估值。本方案通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下各个条件对网络系统的影响,同时根据各功能项对网络系统的运行状态影响信息,可以进行不同运行状态下的可靠性的定量评估,提高了网络系统可靠性评估的准确性。
附图说明
图1为一个实施例中网络系统可靠性评估方法的流程示意图;
图2为另一个实施例中网络系统可靠性评估方法的流程示意图;
图3为另一个实施例中网络系统可靠性评估方法的流程示意图;
图4为另一个实施例中网络系统可靠性评估方法的流程示意图;
图5为另一个实施例中网络系统可靠性评估方法的流程示意图;
图6为另一个实施例中网络系统可靠性评估方法的流程示意图;
图7为一个实施例中网络系统可靠性评估装置的结构框图;
图8为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
由于网络系统的特殊性,难以长时间全系统开展可靠性试验,发明人发现,利用各类试验数据进行综合评估可以达到较为全面的评估效果,但如何考虑不同试验对网络系统可靠性影响,是需要解决的一个难题。本申请提供了一种网络系统可靠性评估方法,可以通过与待评估的网络系统连接的服务器来实现,服务器获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息,根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系,获取功能信息集合中的功能项对应的试验时间数据,根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。上述方法可用于无线通信网络系统、指挥控制网络系统等具有多功能、多状态、软硬件结合的网络系统的可靠性定量评估。其中,服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图1所示,提供了一种网络系统可靠性评估方法,包括以下步骤:
步骤S200,获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息。
功能信息集合是指网络系统可以实现的各项功能的信息集合,网络系统不同于单一的硬件系统,可用于执行多种功能、支持多种应用,具有多任务、复杂异构、功能与配置时变特性、自修复自重构特性以及信息物理融合,软硬件难以分解等特点。网络系统在不同的运行状态下,需要实现不同的功能,在实施例中,网络系统运行状态的划分可以根据网络系统运行要求,划分为不同运行状态,并统计网络系统在各运行状态下需运行的功能项,根据网络系统在各运行状态下需运行的功能项的统计结果,对各功能项进行分解,确定各功能项对网络系统的运行状态影响信息。在一个实施例中,某网络系统的运行状态分为最低功能运行状态、主要功能运行状态和全功能运行状态,其中,最低功能运行状态包括网络系统最重要的功能项满足运行要求,如果最低功能的各运行项不能满足运行要求,整个网络系统近乎处于瘫痪状态。全功能运行状态包括网络系统的所有功能项满足运行要求,任何一个影响功能项运行的故障都会影响网络全功能。主要功能项运行状态处于两者之间,主要功能运行状态的数量可以是一个,也可以根据各个运行状态进行设定为多个,各运行状态下对应的各功能项都应满足运行要求。可以理解,影响系统最低功能的功能项一定影响系统主要功能和全功能,影响系统主要功能的功能项一定影响系统全功能。
步骤S300,根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系。
预设网络系统可靠性评估参数是指用于表征网络系统可靠性的参数,其对应参数评估值即为网络系统的可靠性。不同的运行状态下的需要运行的功能项不同,故对应的预设网络系统可靠性评估参数的参数值的计算方式也不同。预设网络系统可靠性评估参数与各功能信息的映射关系是指不同运行状态下,预设网络系统可靠性评估参数在进行参数值计算时,功能信息集合中所需要的满足正常运行要求的各功能项。
步骤S400,获取功能信息集合中的功能项对应的试验时间数据。
为了获得全面的分析数据,采用试验的方式对网络系统进行可靠性评估,试验是指实现该功能时需要在各个不同环境条件下进行运行测试的过程。在试验过程中,记录有试验记录数据,试验记录数据是用于记录试验过程的原始数据,例如试验类型、试验条件、测试功能、环境影响因子、测试开始时间、测试结束时间、故障处理开始时间、故障处理结束时间以及故障责任判定等。通过试验记录数据,可以计算得到试验时间数据,试验时间数据包括试验时间、正常运行时间以及非正常运行时间,其中,试验时间等于正常运行时间与非正常运行时间之和。
步骤S500,根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。
根据映射关系,可以确定在不同运行状态下,计算预设网络系统可靠性评估参数的参数值所需要满足的各功能项,累计指定的运行状态下各功能项的试验时间数据,可以获得该运行状态下对应的累计试验时间数据,从而计算得到该运行状态下预设网络系统可靠性评估参数的评估值。通过全面的试验,可以解决多状态网络系统的可靠性定量评估问题。
上述网络系统可靠性评估方法,通过获取网络系统的功能信息集合中的功能项对网络系统的运行状态影响信息,建立在各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,通过获取功能信息集合中的功能项对应的试验时间数据,根据映射关系,可以确定各运行状态下对应的功能项,根据功能项对应的试验时间数据,计算对应运行状态下预设网络系统可靠性评估参数的评估值。本方案通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下各个条件对网络系统的影响,同时根据各功能项对网络系统的运行状态影响信息,可以进行不同运行状态下的可靠性的定量评估,提高了网络系统可靠性评估的准确性。
在一个实施例中,如图2所示,步骤S400,获取功能信息集合中的功能项对应的试验时间数据包括:
步骤S420,获取同一功能项对应的多个试验类型的试验记录数据。
步骤S430,根据试验记录数据,获得试验类型的试验时间数据,统计各试验类型的试验时间数据,得到功能项对应的试验时间数据。
试验记录数据是用于记录试验过程的原始数据,具体可以包括试验类型、测试功能、试验条件、试验地点、试验开始时间、试验结束时间、被测节点、业务类型、故障开始时间和故障处理结束时间等。同一功能项需要进行多个类型的试验,例如环境试验、可靠性试验、电磁兼容试验等。在试验过程中,有可能会出现故障,并且需要对故障进行处理,故障分为责任故障和非责任故障,责任故障是网络系统本身存在的影响到运行的故障,需要进行对应的故障处理。非责任故障是指由外界干扰因素导致试验无法正常进行的故障,在实际运行中一般可以避免。有效试验时间等于试验开始时间到试验结束时间之间的时间间隔减去非责任故障导致的不能正常运行时间。由于可靠性相关试验出现问题后一般要求立即进行故障处理,所以试验中有效非正常运行时间等于责任故障的故障开始时间到故障处理结束时间之间的时间间隔。不同的试验一般在不同的试验环境中进行,根据可靠性评估行业的环境影响因子,不同的试验类型中,对应不同的环境影响因子。根据环境影响因子可以将在不同环境下的时间数据转换为在正常运行环境中的等效时间数据,根据环境影响因子和试验记录数据中的各项时间数据,可以计算得到各试验类型的等效试验时间和等效非正常运行时间。
在一个实施例中,如图3所示,步骤S430,根据试验记录数据,获得试验类型的试验时间数据,统计各试验类型的试验时间数据,得到功能项对应的试验时间数据包括:
步骤S440,根据试验记录数据中的记录时间点,计算试验类型的试验时间数据,试验类型包括软件测试试验与硬件测试试验,试验时间数据的数据类别包括等效试验时间和等效非正常运行时间。
步骤S450,根据试验时间数据的数据类别,累计软件测试试验与硬件测试试验中相同数据类别的试验时间数据,得到功能项对应的试验时间数据。
网络系统作为信息化发展的产物,是典型的软硬件综合系统,软件作为网络系统的重要组成部分,对网络系统可靠性具有重要影响,如果忽略软件故障,得到的结果难以如实反映网络系统的真实可靠性水平。目前关于网络系统可靠性的研究和工程实践中都只考虑硬件部分,对于软件导致的系统故障,只进行软件状态更改,不纳入系统可靠性评估,不能反应网络系统的真实水平。软件测试试验是指通过对网络系统中依靠软件执行的功能进行软件测试,发现并解决测试过程中出现的故障的过程。硬件测试试验是指对网络系统中依靠硬件执行的功能进行硬件测试,发现并解决测试过程中出现的故障的过程。在实施例中,还有部分测试试验为软硬结合的测试试验。软件或硬件的测试试验的试验记录数据的记录类别相同,只存在试验数据的差异。通过累计同一功能项对应的软件测试试验与硬件测试试验中同一记录类别的时间数据,例如,累计各试验的有效试验时间以及累计各试验的有效非正常运行时间,可以根据由于表征单个试验类型的有效试验时间和有效非正常运行时间的试验时间数据,根据有效试验时间和有效非正常运行时间,通过环境影响因子的等效替换计算,可获得用于表征该功能项的等效试验时间和等效非正常运行时间,即为该功能项对应的试验时间数据。
在一个实施例中,如图4所示,步骤S440,根据试验记录数据中的记录时间点,计算试验类型的试验时间数据包括:
步骤S442,获取试验类型对应的环境影响因子。
步骤S444,根据试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据。
步骤S446,根据有效试验时间数据、有效非正常运行时间数据以及环境影响因子,计算试验类型的等效试验时间和等效非正常运行时间。
不同的试验类型对应不同的环境影响因子,环境影响因子的具体影响数值可以通过查找环境影响因子数据表来确定,环境影响因子数据表是指利用行业内用于进行可靠性测试的标准数据构建的表格。考虑环境影响因子对各试验的影响,将环境影响因子作为试验时间数据的计算依据,根据试验记录数据中的有效试验时间数据与有效非正常运行时间数据、以及环境影响因子,计算试验类型对应的等效试验时间和等效非正常运行时间。
在一个实施例中,某功能i在试验j对应的环境影响因子为kj,网络系统正常工作条件下对应的环境因子为k0,其中地面良好工作环境的环境因子k0=1中,试验j的试验时间记为tj,正常运行时间记为非正常运行时间记为 则等效试验时间为等效非正常运行时间为通过计算可得到,等效正常运行时间为
在一个实施例中,步骤S452,获取试验类型对应的环境影响因子包括:
根据试验类型对应的试验环境条件,查找预设的环境影响因子数据表。
根据对预设的环境影响因子数据表的查找结果,得到试验类型对应的环境影响因子。
预设的环境影响因子数据表是指根据数据处理方式设定的、便于根据试验类型对应的环境影响因子查找的数据表,预设的环境影响因子数据表中包括试验类型、试验环境以及行业标准对应的影响值。根据试验类型或试验条件可直接通过查找预设的环境影响因子数据表,获得对应的环境影响因子影响值,便于后续试验时间数据的计算。
在一个实施例中,试验时间数据包括等效试验时间和等效非正常运行时间。如图5所示,步骤500,根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下网络系统可靠性评估参数的评估值包括:
步骤S520,根据映射关系,确定运行状态下预设网络系统可靠性评估参数对应的功能项。
步骤S540,累计功能项对应的试验时间数据,得到运行状态下的累计等效试验时间和累计等效非正常运行时间;
步骤S560,根据累计等效试验时间和累计等效非正常运行时间,计算运行状态下的等效正常运行时间;
步骤S580,计算累计等效正常运行时间在累计等效试验时间中的占比,确定运行状态下预设网络系统可靠性评估参数的评估值。
根据各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,可以确定各运行状态下计算预设网络系统可靠性评估参数所需的功能项,在试验过程中,通过记录和计算可获得该状态下各所需功能项的试验时间数据,包括将该功能对应的等效试验时间和等效非正常运行时间,一个功能项对应的等效试验时间和等效非正常运行时间是通过累计该功能的各项试验的试验数据得到的。通过累计该状态下的各功能项对应的等效试验时间和等效非正常运行时间,可以得到该状态对应的累计等效试验时间和累计等效非正常运行时间,根据累计等效试验时间和累计等效非正常运行时间的差值,计算运行状态下的等效正常运行时间,计算累计等效正常运行时间在累计等效试验时间中的占比,确定运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,如图6所示,步骤S200,获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息之前,还包括:
步骤S120,根据网络系统运行要求,划分运行状态,并统计网络系统在各运行状态下需运行的功能项;
步骤S140,根据网络系统在各运行状态下需运行的功能项的统计结果,确定各功能项对网络系统的运行状态影响信息。
网络系统的运行要求是根据实际应用场景和实际运行过程来进行设定的,每一个网络系统都存在多个不同的运行状态,具体的划分可以根据实际需要进行设定,例如划分为最低功能运行状态,主要功能运行状态以及全功能运行状态,其中,主要功能运行状态又可以划分为第一主要功能运行状态,第二主要功能运行状态等,不同的运行状态可通过运行对应的功能项,满足网络系统实现不同的任务。根据划分结果,可以确定各运行状态需要运行的功能项,对各功能项的运行数据进行分解后,可以通过统计确定功能数据集合中各个功能项对网络系统的运行状态影响信息。例如功能A的运行状态影响信息为:对最低功能运行状态无影响,对第一主要功能运行状态和全功能运行状态有影响。
在一个应用实例中,网络系统的功能项,记为F={f1,f2…fn};功能项对网络系统的影响情况,记为E={e1,e2…en};各类状态对应的网络系统可靠性评估参数,记为A={A1,A2…Ab},b=max(e1),1,≤i≤n;试验类型,记为G={g1,g2…gm};各试验类型对应的环境因子,记为K={k1,k2…km};网络系统正常工作条件下对应的环境因子为k0(其中地面良好工作环境的环境因子为1);系统功能在第j类试验中的试验时间,记为功能项在第j类试验中的有效运行时间,记为功能项在第j类试验中的有效非正常运行时间,记为 网络系统各状态对应的有效试验时间,记为网络系统各状态对应的有效正常运行时间,记为网络系统各状态对应的有效非正常运行时间,记为例如,某网络系统的功能分为最低功能、主要功能和全功能三个等级,对应的指标分别为最低功能可用度(A1)、主要功能可用度(A2)和全功能可用度(A3)。
各功能项的等效试验时间的计算公式为:
各功能项的等效非正常运行时间的计算公式为:
各功能项的等效正常运行时间的计算公式为:
计算出网络系统状态p对应的累计等效试验时间的计算公式为:
其中,
网络系统状态p对应的累计等效非正常运行时间的计算公式为:
其中,
网络系统状态p对应的累计等效正常运行时间的计算公式为:
由此,可得到网络系统状态p对应预设网络系统可靠性评估参数的评估值为:
上述各实施例,给出了一种具有多功能、多状态、软硬件综合的网络可靠性定量评估方法,可应用于轨道交通控制系统、自动化指挥系统、船舶装备系统、综合移动通信系统等军民领域关键网络系统。
应该理解的是,虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-6中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种网络系统可靠性评估装置包括:
信息获取模块200,用于获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息;
映射关系建立模块300,用于根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系;
试验时间数据获取模块400,用于获取功能信息集合中的功能项对应的试验时间数据;
可靠性评估模块500,用于根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,试验时间数据获取模块400,还用于获取同一功能项对应的多个试验类型的试验记录数据,根据试验记录数据,获得试验类型的试验时间数据,统计各试验类型的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,试验时间数据获取模块400,还用于根据试验记录数据中的记录时间点,计算试验类型的试验时间数据,试验类型包括软件测试试验与硬件测试试验,试验时间数据的数据类别包括等效试验时间和等效非正常运行时间,根据试验时间数据的数据类别,累计软件测试试验与硬件测试试验中相同数据类别的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,试验时间数据获取模块400,还用于获取试验类型对应的环境影响因子,根据试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据,根据有效试验时间数据、有效非正常运行时间数据以及环境影响因子,计算试验类型的等效试验时间和等效非正常运行时间。
在其中一个实施例中,试验时间数据获取模块400,还用于根据试验类型对应的试验环境条件,查找预设的环境影响因子数据表,根据对预设的环境影响因子数据表的查找结果,得到试验类型对应的环境影响因子。
在一个实施例中,试验时间数据包括等效试验时间和等效非正常运行时间;可靠性评估模块500,还用于根据映射关系,确定运行状态下预设网络系统可靠性评估参数对应的功能项,累计功能项对应的试验时间数据,得到运行状态下的累计等效试验时间和累计等效非正常运行时间,根据累计等效试验时间和累计等效非正常运行时间,计算运行状态下的等效正常运行时间,计算累计等效正常运行时间在累计等效试验时间中的占比,确定运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,网络系统可靠性评估装置还包括运行状态影响信息确定模块,用于根据网络系统运行要求,划分运行状态,并统计网络系统在各运行状态下需运行的功能项,根据网络系统在各运行状态下需运行的功能项的统计结果,确定各功能项对网络系统的运行状态影响信息。
上述网络系统可靠性评估装置,通过获取网络系统的功能信息集合中的功能项对网络系统的运行状态影响信息,建立在各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,通过获取功能信息集合中的功能项对应的试验时间数据,根据映射关系,可以确定各运行状态下对应的功能项,根据功能项对应的试验时间数据,计算对应运行状态下预设网络系统可靠性评估参数的评估值。本方案通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下各个条件对网络系统的影响,同时根据各功能项对网络系统的运行状态影响信息,可以进行不同运行状态下的可靠性的定量评估,提高了网络系统可靠性评估的准确性。
关于网络系统可靠性评估装置的具体限定可以参见上文中对于网络系统可靠性评估方法的限定,在此不再赘述。上述网络系统可靠性评估装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图8所示。该计算机设备包括通过网络系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作网络系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作网络系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储网络系统可靠性评估数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种网络系统可靠性评估方法。
本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息;
根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系;
获取功能信息集合中的功能项对应的试验时间数据;
根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取同一功能项对应的多个试验类型的试验记录数据;
根据试验记录数据,获得试验类型的试验时间数据,统计各试验类型的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据试验记录数据中的记录时间点,计算试验类型的试验时间数据,试验类型包括软件测试试验与硬件测试试验,试验时间数据的数据类别包括等效试验时间和等效非正常运行时间;
根据试验时间数据的数据类别,累计软件测试试验与硬件测试试验中相同数据类别的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取试验类型对应的环境影响因子;
根据试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据;
根据有效试验时间数据、有效非正常运行时间数据以及环境影响因子,计算试验类型的等效试验时间和等效非正常运行时间。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据试验类型对应的试验环境条件,查找预设的环境影响因子数据表;
根据对预设的环境影响因子数据表的查找结果,得到试验类型对应的环境影响因子。
在一个实施例中,试验时间数据包括等效试验时间和等效非正常运行时间;处理器执行计算机程序时还实现以下步骤包括:
根据映射关系,确定运行状态下预设网络系统可靠性评估参数对应的功能项;
累计功能项对应的试验时间数据,得到运行状态下的累计等效试验时间和累计等效非正常运行时间;
根据累计等效试验时间和累计等效非正常运行时间,计算运行状态下的等效正常运行时间;
计算累计等效正常运行时间在累计等效试验时间中的占比,确定运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据网络系统运行要求,划分运行状态,并统计网络系统在各运行状态下需运行的功能项;
根据网络系统在各运行状态下需运行的功能项的统计结果,确定各功能项对网络系统的运行状态影响信息。
上述用于实现网络系统可靠性评估方法的计算机设备,通过获取网络系统的功能信息集合中的功能项对网络系统的运行状态影响信息,建立在各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,通过获取功能信息集合中的功能项对应的试验时间数据,根据映射关系,可以确定各运行状态下对应的功能项,根据功能项对应的试验时间数据,计算对应运行状态下预设网络系统可靠性评估参数的评估值。本方案通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下各个条件对网络系统的影响,同时根据各功能项对网络系统的运行状态影响信息,可以进行不同运行状态下的可靠性的定量评估,提高了网络系统可靠性评估的准确性。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取网络系统的功能信息集合,以及功能信息集合中的功能项对网络系统的运行状态影响信息;
根据运行状态影响信息,建立预设网络系统可靠性评估参数在网络系统的不同运行状态下与功能信息集合的映射关系;
获取功能信息集合中的功能项对应的试验时间数据;
根据映射关系和功能信息集合中的功能项对应的试验时间数据,分别计算在不同运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取同一功能项对应的多个试验类型的试验记录数据;
根据试验记录数据,获得试验类型的试验时间数据,统计各试验类型的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据试验记录数据中的记录时间点,计算试验类型的试验时间数据,试验类型包括软件测试试验与硬件测试试验,试验时间数据的数据类别包括等效试验时间和等效非正常运行时间;
根据试验时间数据的数据类别,累计软件测试试验与硬件测试试验中相同数据类别的试验时间数据,得到功能项对应的试验时间数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取试验类型对应的环境影响因子;
根据试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据;
根据有效试验时间数据、有效非正常运行时间数据以及环境影响因子,计算试验类型的等效试验时间和等效非正常运行时间。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据试验类型对应的试验环境条件,查找预设的环境影响因子数据表;
根据对预设的环境影响因子数据表的查找结果,得到试验类型对应的环境影响因子。
在一个实施例中,试验时间数据包括等效试验时间和等效非正常运行时间;计算机程序被处理器执行时还实现以下步骤包括:
根据映射关系,确定运行状态下预设网络系统可靠性评估参数对应的功能项;
累计功能项对应的试验时间数据,得到运行状态下的累计等效试验时间和累计等效非正常运行时间;
根据累计等效试验时间和累计等效非正常运行时间,计算运行状态下的等效正常运行时间;
计算累计等效正常运行时间在累计等效试验时间中的占比,确定运行状态下预设网络系统可靠性评估参数的评估值。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据网络系统运行要求,划分运行状态,并统计网络系统在各运行状态下需运行的功能项;
根据网络系统在各运行状态下需运行的功能项的统计结果,确定各功能项对网络系统的运行状态影响信息。
上述用于实现网络系统可靠性评估方法的计算机可读存储介质,通过获取网络系统的功能信息集合中的功能项对网络系统的运行状态影响信息,建立在各运行状态下预设网络系统可靠性评估参数与功能信息集合的映射关系,通过获取功能信息集合中的功能项对应的试验时间数据,根据映射关系,可以确定各运行状态下对应的功能项,根据功能项对应的试验时间数据,计算对应运行状态下预设网络系统可靠性评估参数的评估值。本方案通过获取采用试验的方式得到的试验时间数据,可以考虑到不同运行条件下各个条件对网络系统的影响,同时根据各功能项对网络系统的运行状态影响信息,可以进行不同运行状态下的可靠性的定量评估,提高了网络系统可靠性评估的准确性。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种网络系统可靠性评估方法,所述方法包括:
获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
获取所述功能信息集合中的功能项对应的试验时间数据;
根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
2.根据权利要求1所述的方法,其特征在于,所述获取所述功能信息集合中的功能项对应的试验时间数据包括:
获取同一所述功能项对应的多个试验类型的试验记录数据;
根据所述试验记录数据,获得所述试验类型的试验时间数据,统计各所述试验类型的试验时间数据,得到所述功能项对应的试验时间数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述试验记录数据,获得所述试验类型的试验时间数据,统计各所述试验类型的试验时间数据,得到所述功能项对应的试验时间数据包括:
根据所述试验记录数据中的记录时间点,计算所述试验类型的试验时间数据,所述试验类型包括软件测试试验与硬件测试试验,所述试验时间数据的数据类别包括等效试验时间和等效非正常运行时间;
根据所述试验时间数据的数据类别,累计所述软件测试试验与所述硬件测试试验中相同数据类别的所述试验时间数据,得到所述功能项对应的试验时间数据。
4.根据权利要求3所述的方法,其特征在于,所述根据所述试验记录数据中的记录时间点,计算所述试验类型的试验时间数据包括:
获取所述试验类型对应的环境影响因子;
根据所述试验记录数据中的记录时间点,获得有效试验时间数据与有效非正常运行时间数据;
根据所述有效试验时间数据、所述有效非正常运行时间数据以及所述环境影响因子,计算所述试验类型的等效试验时间和等效非正常运行时间。
5.根据权利要求4所述的方法,其特征在于,获取所述试验类型对应的环境影响因子包括:
根据所述试验类型对应的试验环境条件,查找预设的环境影响因子数据表;
根据对所述预设的环境影响因子数据表的查找结果,得到所述试验类型对应的环境影响因子。
6.根据权利要求1所述的方法,其特征在于,所述试验时间数据包括等效试验时间和等效非正常运行时间;所述根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述网络系统可靠性评估参数的评估值包括:
根据所述映射关系,确定所述运行状态下所述预设网络系统可靠性评估参数对应的功能项;
累计所述功能项对应的试验时间数据,得到所述运行状态下的累计等效试验时间和累计等效非正常运行时间;
根据所述累计等效试验时间和所述累计等效非正常运行时间,计算所述运行状态下的等效正常运行时间;
计算所述累计等效正常运行时间在所述累计等效试验时间中的占比,确定所述运行状态下所述预设网络系统可靠性评估参数的评估值。
7.根据权利要求1所述的方法,其特征在于,所述获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息之前,还包括:
根据网络系统运行要求,划分运行状态,并统计所述网络系统在各所述运行状态下需运行的功能项;
根据所述网络系统在各所述运行状态下需运行的功能项的统计结果,确定各功能项对所述网络系统的运行状态影响信息。
8.一种网络系统可靠性评估装置,其特征在于,所述装置包括:
信息获取模块,用于获取所述网络系统的功能信息集合,以及所述功能信息集合中的功能项对所述网络系统的运行状态影响信息;
映射关系建立模块,用于根据所述运行状态影响信息,建立预设网络系统可靠性评估参数在所述网络系统的不同运行状态下与所述功能信息集合的映射关系;
试验时间数据获取模块,用于获取所述功能信息集合中的功能项对应的试验时间数据;
可靠性评估模块,用于根据所述映射关系和所述功能信息集合中的功能项对应的试验时间数据,分别计算在所述不同运行状态下所述预设网络系统可靠性评估参数的评估值。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN201811577373.XA 2018-12-19 2018-12-19 网络系统可靠性评估方法、装置、计算机设备和存储介质 Active CN109714201B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811577373.XA CN109714201B (zh) 2018-12-19 2018-12-19 网络系统可靠性评估方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811577373.XA CN109714201B (zh) 2018-12-19 2018-12-19 网络系统可靠性评估方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN109714201A true CN109714201A (zh) 2019-05-03
CN109714201B CN109714201B (zh) 2021-08-06

Family

ID=66255998

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811577373.XA Active CN109714201B (zh) 2018-12-19 2018-12-19 网络系统可靠性评估方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN109714201B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111680392A (zh) * 2020-04-23 2020-09-18 中国电子产品可靠性与环境试验研究所((工业和信息化部电子第五研究所)(中国赛宝实验室)) 复杂电子系统可靠性量化方法、装置和计算机设备
CN113923139A (zh) * 2021-12-15 2022-01-11 北京城市轨道交通咨询有限公司 一种评估列控数据通信系统可靠性的方法及装置
CN115296991A (zh) * 2022-08-02 2022-11-04 广东电网有限责任公司 一种网元性能的计算方法及装置
CN115794175A (zh) * 2023-02-06 2023-03-14 广东省科学技术情报研究所 基于大数据的技术研发评估系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040208128A1 (en) * 2000-06-13 2004-10-21 Lu Leonard L. IP backbone network reliability and performance analysis method and apparatus
CN101145983A (zh) * 2007-08-07 2008-03-19 中兴通讯股份有限公司 一种网管系统的自诊断和自恢复子系统及方法
CN102819813A (zh) * 2012-08-20 2012-12-12 浙江大学 一种智能变电站自动化系统的安全风险评估方法
CN103019155A (zh) * 2012-12-15 2013-04-03 北京航空航天大学 一种用于数控系统可靠性测试的试验装置
CN104638771A (zh) * 2015-02-15 2015-05-20 国家电网公司 一种智能变电站过程层网络短期可靠性定量分析方法
CN108170892A (zh) * 2017-11-30 2018-06-15 中国航空综合技术研究所 一种基于事故动态推演仿真的故障模式与影响分析方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040208128A1 (en) * 2000-06-13 2004-10-21 Lu Leonard L. IP backbone network reliability and performance analysis method and apparatus
CN101145983A (zh) * 2007-08-07 2008-03-19 中兴通讯股份有限公司 一种网管系统的自诊断和自恢复子系统及方法
CN102819813A (zh) * 2012-08-20 2012-12-12 浙江大学 一种智能变电站自动化系统的安全风险评估方法
CN103019155A (zh) * 2012-12-15 2013-04-03 北京航空航天大学 一种用于数控系统可靠性测试的试验装置
CN104638771A (zh) * 2015-02-15 2015-05-20 国家电网公司 一种智能变电站过程层网络短期可靠性定量分析方法
CN108170892A (zh) * 2017-11-30 2018-06-15 中国航空综合技术研究所 一种基于事故动态推演仿真的故障模式与影响分析方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
贾利民 等: "系统可靠性方法研究现状与展望", 《系统工程与电子技术》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111680392A (zh) * 2020-04-23 2020-09-18 中国电子产品可靠性与环境试验研究所((工业和信息化部电子第五研究所)(中国赛宝实验室)) 复杂电子系统可靠性量化方法、装置和计算机设备
CN111680392B (zh) * 2020-04-23 2024-04-23 中国电子产品可靠性与环境试验研究所((工业和信息化部电子第五研究所)(中国赛宝实验室)) 复杂电子系统可靠性量化方法、装置和计算机设备
CN113923139A (zh) * 2021-12-15 2022-01-11 北京城市轨道交通咨询有限公司 一种评估列控数据通信系统可靠性的方法及装置
CN113923139B (zh) * 2021-12-15 2022-03-01 北京城市轨道交通咨询有限公司 一种评估列控数据通信系统可靠性的方法及装置
CN115296991A (zh) * 2022-08-02 2022-11-04 广东电网有限责任公司 一种网元性能的计算方法及装置
CN115794175A (zh) * 2023-02-06 2023-03-14 广东省科学技术情报研究所 基于大数据的技术研发评估系统及方法

Also Published As

Publication number Publication date
CN109714201B (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN109714201A (zh) 网络系统可靠性评估方法、装置、计算机设备和存储介质
CN108874926A (zh) 海量数据查询方法、装置、计算机设备和存储介质
Monden et al. Assessing the cost effectiveness of fault prediction in acceptance testing
US8667334B2 (en) Problem isolation in a virtual environment
CN107885656A (zh) 产品算法自动化测试方法及应用服务器
CN113014421B (zh) 一种面向云原生系统的微服务根因定位方法
CN109858737A (zh) 基于模型部署的评分模型调整方法、装置和计算机设备
US20120054331A1 (en) Correlation of metrics monitored from a virtual environment
CN108491321B (zh) 测试用例范围确定方法、装置及存储介质
CN105955878A (zh) 服务器端的测试方法及系统
CN105930276A (zh) 一种识别测试用例失败原因的方法及装置
CN110689232A (zh) 工作流配置的优化处理方法、装置和计算机设备
CN106612204B (zh) 业务校验方法及装置
CN111026647B (zh) 代码覆盖率的获取方法、装置、计算机设备和存储介质
CN108446175A (zh) 任务处理方法、装置、计算机设备和存储介质
CN109783260A (zh) 智能it全流程运维方法、装置、设备及可读存储介质
CN112269744A (zh) 系统异常测试方法、装置、计算机设备和存储介质
CN111782317A (zh) 页面的测试方法和装置、存储介质和电子装置
CN111970151A (zh) 虚拟及容器网络的流量故障定位方法及系统
CN114185770A (zh) 生成测试数据的方法、装置、计算机设备和存储介质
CN112685462B (zh) 馈线数据分析方法、装置、计算机设备和存储介质
CN112051771B (zh) 多云数据采集方法、装置、计算机设备和存储介质
CN107357721B (zh) 测试系统的方法及装置
WO2021036681A1 (zh) 数据验证方法、装置、计算机设备和存储介质
CN111008143B (zh) 覆盖率调度测试方法、终端设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 511300 No.78, west of Zhucun Avenue, Zhucun street, Zengcheng District, Guangzhou City, Guangdong Province

Applicant after: CHINA ELECTRONIC PRODUCT RELIABILITY AND ENVIRONMENTAL TESTING RESEARCH INSTITUTE ((THE FIFTH ELECTRONIC RESEARCH INSTITUTE OF MIIT)(CEPREI LABORATORY))

Address before: 510610 No. 110 Zhuang Road, Tianhe District, Guangdong, Guangzhou, Dongguan

Applicant before: CHINA ELECTRONIC PRODUCT RELIABILITY AND ENVIRONMENTAL TESTING RESEARCH INSTITUTE ((THE FIFTH ELECTRONIC RESEARCH INSTITUTE OF MIIT)(CEPREI LABORATORY))

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant