CN113778834A - 一种应用软件的系统性能测试方法、装置与计算设备 - Google Patents
一种应用软件的系统性能测试方法、装置与计算设备 Download PDFInfo
- Publication number
- CN113778834A CN113778834A CN202111324487.5A CN202111324487A CN113778834A CN 113778834 A CN113778834 A CN 113778834A CN 202111324487 A CN202111324487 A CN 202111324487A CN 113778834 A CN113778834 A CN 113778834A
- Authority
- CN
- China
- Prior art keywords
- fault
- application software
- information
- system performance
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 claims abstract description 85
- 238000012545 processing Methods 0.000 claims abstract description 59
- 230000008569 process Effects 0.000 claims abstract description 57
- 238000004891 communication Methods 0.000 claims description 29
- 238000012937 correction Methods 0.000 claims description 8
- 238000011156 evaluation Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 5
- 238000011056 performance test Methods 0.000 claims description 2
- 238000002347 injection Methods 0.000 abstract description 15
- 239000007924 injection Substances 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 8
- 230000007246 mechanism Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000007723 transport mechanism Effects 0.000 description 2
- 238000012384 transportation and delivery Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000013522 software testing Methods 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Prevention of errors by analysis, debugging or testing of software
- G06F11/3668—Testing of software
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
- H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种应用软件的系统性能测试方法、装置与计算设备,包括:接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;以及对所述故障状态进行处理;当故障解除时,继续执行对应的业务流程;当故障未解除时,反馈故障情况,根据所述故障状态处理结果确定所述应用软件的系统性能。本申请通过故障注入的方式,检查应用程序的故障处理能力。
Description
技术领域
本发明涉及软件故障模拟技术领域,尤其是一种应用软件的系统性能测试方法、装置与计算设备。
背景技术
随着软件应用的不断深入,软件的规模和复杂度不断增加,软件错误发生的概率也在增大。而各种软件内嵌于安全关键系统而言,一旦发生故障,造成的后果非常严重。比如:自动驾驶系统、核反应堆系统、金融证券管理系统等安全关键系统,软件一旦发生故障,会导致系统直接或者间接的处于危险状态。上述系统有自己的故障处理检测手段,避免发生大的风险。但是有些故障往往是概率性的,不是每次都能显现出来,有时候很难去复现和排查,为了测试故障检测和处理的效果,一般采用人为的注入故障,然后看故障的检测系统是否起到作用。
现有技术中对应用软件的系统性能测试时多采用基于硬件的故障注入方式,而对于从软件上去解决的思路比较少。因此,需要一种利用软件模拟方式进行应用软件的系统性能的测试方法。
发明内容
为此,本发明提供了一种应用软件的系统性能测试方法、装置与计算设备,以力图解决或者至少缓解上面存在的至少一个问题。
根据本发明的一个方面,提供了一种应用软件的系统性能测试方法,包括步骤:接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及根据所述故障状态处理结果确定所述应用软件的系统性能。
可选地,在根据本发明的系统性能测试方法中,所述根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息的步骤之后还包括:向用户反馈故障配置完成的信息。
可选地,在根据本发明的系统性能测试方法中,在所述接收用户配置的故障描述信息的步骤之前还包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;根据所述故障描述信息获取故障类型、故障参数和故障信息的步骤包括:通过故障描述信息,匹配对应的故障编码,通过所述故障编码查找到对应的故障类型、故障参数和故障信息。
可选地,在根据本发明的系统性能测试方法中,响应于用户启动应用软件的操作,执行所述应用软件对应的业务流程的步骤包括:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行所述应用软件对应的业务流程。
可选地,在根据本发明的系统性能测试方法中,对所述故障状态进行处理的步骤包括:逐个对所述故障状态进行故障分析,并基于应用程序的纠错流程对所述故障状态进行处理。
可选地,在根据本发明的系统性能测试方法中,根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定所述应用软件的系统性能。
可选地,在根据本发明的系统性能测试方法中,所述接收用户配置的故障描述信息的步骤包括:通过TCP/IP协议与局域网设备通信,接收用户通过所述局域网设备远程配置的故障描述信息。
可选地,在根据本发明的系统性能测试方法中,在所述当故障未解除,反馈故障情况的步骤之后还包括:接收用户通过所述局域网设备对所述故障状态的处理操作。
根据本发明的另一方面,还提供了一种应用软件的系统性能测试装置,包括:故障通信模块,适于接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;故障设置模块,适于根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;业务流程模块,适于响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;故障处理模块,适于对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及性能评价模块,适于根据所述故障状态处理结果确定所述应用软件的系统性能。
根据本发明的另一方面,还提供了一种计算设备,包括:至少一个处理器和存储有程序指令的存储器;当程序指令被处理器读取并执行时,使得计算设备执行如上的系统性能测试方法。
根据本发明的再一方面,还提供了一种存储有程序指令的可读存储介质,当程序指令被计算设备读取并执行时,使得计算设备执行如上的系统性能测试方法。
根据本发明的系统性能测试方法、装置与计算设备,能够实现以下有益效果中的至少一种:
通过本申请的应用软件的系统性能测试方法通过故障注入的方式,对于一些概率性的故障,实现复现和排查,检查应用程序的故障处理能力,帮助应用软件完成故障检测和处理,实现应用程序系统性能的测试。
本申请根据应用软件测试的场景,将相应的故障进行注入;还能通过远程控制方式进行相关操作,完成故障的注入,使操作更加灵活多样。
本申请通过故障注入,进行相应故障的配置,当应用软件进入故障状态后,会触发应用软件进行故障的判断和解除,从而完成应用软件处理故障能力的测试,提高系统的可靠性和安全性。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的计算设备100的示意图;
图2示出了根据本发明一个实施例的应用软件的系统性能测试方法200的流程图;
图3示出了根据本发明一个实施例的故障描述信息的查找的示意图;
图4示出了根据本发明一个实施例的对故障状态进行故障处理的示意图;
图5示出了根据本发明一个实施例的应用软件的系统性能测试装置500的结构示意图;
图6示出了根据本发明一个实施例的故障注入过程的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明的系统性能测试方法在计算设备中执行。计算设备可以是任意具有存储和计算能力的设备,其例如可以实现为服务器、工作站等,也可以实现为桌面计算机、笔记本计算机等个人配置的计算机,或者实现为手机、平板电脑、智能可穿戴设备、物联网设备等终端设备,但不限于此。
图1示出了根据本发明一个实施例的计算设备100的示意图。需要说明的是,图1所示的计算设备100仅为一个示例,在实践中,用于实施本发明的系统性能测试方法的计算设备可以是任意型号的设备,其硬件配置情况可以与图1所示的计算设备100相同,也可以与图1所示的计算设备100不同。实践中用于实施本发明的系统性能测试方法的计算设备可以对图1所示的计算设备100的硬件组件进行增加或删减,本发明对计算设备的具体硬件配置情况不做限制。
如图1所示,在基本的配置102中,计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。
取决于期望的配置,处理器104可以是任何类型的处理,包括但不限于:微处理器(µP)、微控制器(µC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用,或者在一些实现中,存储器控制器118可以是处理器104的一个内部部分。
取决于期望的配置,系统存储器106可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。计算设备中的物理内存通常指的是易失性存储器RAM,磁盘中的数据需要加载至物理内存中才能够被处理器104读取。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。在一些实施方式中,应用122可以布置为在操作系统上由一个或多个处理器104利用程序数据124执行指令。操作系统120例如可以是Linux、Windows等,其包括用于处理基本系统服务以及执行依赖于硬件的任务的程序指令。应用122包括用于实现各种用户期望的功能的程序指令,应用122例如可以是浏览器、即时通讯软件、软件开发工具(例如集成开发环境IDE、编译器等)等,但不限于此。当应用122被安装到计算设备100中时,可以向操作系统120添加驱动模块。
在计算设备100启动运行时,处理器104会从存储器106中读取操作系统120的程序指令并执行。应用122运行在操作系统120之上,利用操作系统120以及底层硬件提供的接口来实现各种用户期望的功能。当用户启动应用122时,应用122会加载至存储器106中,处理器104从存储器106中读取并执行应用122的程序指令。
计算设备100还包括储存设备132,储存设备132包括可移除储存器136和不可移除储存器138,可移除储存器136和不可移除储存器138均与储存接口总线134连接。
计算设备100还可以包括有助于从各种接口设备(例如,输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156,它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160,其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
在根据本发明的计算设备100中,应用122包括用于执行本发明的系统性能测试方法200的指令,该指令可以指示处理器104执行本发明的系统性能测试方法200,以通过自动刻录检验而避免文件系统的紊乱、数据损坏和乱码等。
图2示出了根据本发明一个实施例的用于系统性能测试方法200的流程图。系统性能测试方法200在计算设备(例如前述计算设备100)中执行,通过故障注入,进行相应故障的配置,当应用软件进入故障状态后,会触发应用软件进行故障的判断和解除,从而完成应用软件系统性能的测试,提高系统的可靠性和安全性。如图2所示,方法200可以包括步骤S210至步骤S250。
在步骤S210中,接收用户配置的故障描述信息;根据故障描述信息获取故障类型、故障参数和故障信息。
根据本发明的一种实施方式,在步骤S210之前还可以包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系。
根据本发明的一种实施方式,步骤S210中根据故障描述信息获取故障类型、故障参数和故障信息的步骤可以包括:通过故障描述信息,根据维护的对应关系匹配故障编码,通过故障编码查找到对应的故障类型、故障参数和故障信息。
实际操作过程中,如图3所示,用户可以在图形界面上选择相应的故障,如Fault1、Fault 2……Fault n,每种故障有对应的故障描述信息,如信息1、信息2……信息n,根据故障描述信息可以使用户知道配置的是哪种故障。然后,根据故障描述信息对应的故障编码/ID,通过故障编码/ID,可以找到对应的参数,不同的故障对应不同的参数列表,如参数列表1、参数列表2……参数列表n,这些故障相关的信息可以存放在数据库中,便于查找和修改。
根据本发明的一种实施方式,步骤S210中接收用户配置的故障描述信息的步骤可以包括:通过TCP/IP协议与局域网设备通信,接收用户通过局域网设备远程配置的故障描述信息。
其中,TCP/IP:(Transmission Control Protocol/Internet Protocol,传输控制协议/网际协议)为能够在多个不同网络间实现信息传输的协议簇。例如FTP(FileTransfer Protocol,文件传输协议)、SMTP(Simple Mail Transfer Protocol,简单邮件传输协议)、TCP、UDP(User Datagram Protocol,用户数据报协议)、IP等协议。
本发明实施例中,故障注入与应用软件的通讯方式可以采用TCP/IP协议,利用Socket网络通讯技术,实现故障信息之间的相互交换。因此,故障注入的形式可以是远程方式进行故障注入,在一个局域网段内即可进行通信。
在步骤S220中,根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息。
本发明实施例中,用户可以在故障注入过程中可以通过图形化界面选择故障类型,进行相应的故障配置,配置完成之后,根据故障相关的信息在业务流程的故障位置修改参数信息。
根据本发明的一种实施方式,步骤S220之后还可以包括:向用户反馈故障配置完成的信息。
本发明实施例中,在参数信息设置完成后,将故障配置完成的信息反馈至用户,可以在图形界面显示故障配置完成的信息。
在步骤S230中,响应于用户启动应用软件的操作,执行应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态。
根据本发明的一种实施方式,步骤S230中响应于用户启动应用软件的操作,执行应用软件对应的业务流程的步骤可以包括:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行应用软件对应的业务流程。
本发明实施例中,当用户再次启动应用软件,应用软件开始执行相应的业务流程,当执行到故障位置时,会出现故障现象,此时应用软件的故障处理机制会对故障进行处理,分析故障原因并解除故障,如果故障解除,会继续业务流程的执行,如果后序再次遇到故障现象,会继续触发故障处理机制,进行故障处理和故障解除;如果后序没有遇到故障现象,应用软件执行直至结束。
在步骤S240中,对故障状态进行处理;当故障解除时,继续执行应用软件对应的业务流程;当故障未解除时,反馈故障情况。
根据本发明的一种实施方式,步骤S240中对故障状态进行处理的步骤可以包括:逐个对故障状态进行故障分析,并基于应用程序的纠错流程对故障状态进行处理。
本发明实施例中,在应用软件中,一般包含故障处理机制,用来进行故障的解除。如图4所示,当收到故障描述信息后,可以根据故障编码/ID索引数据库,找到对应的故障参数列表,如参数列表1、参数列表2……参数列表n,根据参数列表中的信息,可以找到应用软件对应的业务流程中需要配置故障的位置,如Fault Position 1、Fault Position 2……Fault Position n,然后启动应用软件,应用软件执行对应的业务流程,如流程1、流程2……流程n,在相应的故障位置,会出现相应的故障,如Fault 1、Fault 2……Fault n,进入故障状态呈现出故障现象。然后通过对故障的处理与分析,可以包括故障判断、故障分析、故障处理,专家诊断等过程,将故障进行解除。从而继续应用软件的执行,如果后续还有其他故障,则继续重复上面步骤,否则的话,运行直至软件关闭。
根据本发明的一种实施方式,步骤S240中当故障未解除时,反馈故障情况之后还可以包括:接收用户通过局域网设备对故障状态的处理操作。
在步骤S250中,根据故障状态处理结果确定所述应用软件的系统性能。
本发明实施例中,步骤S250根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定应用软件的系统性能。
本发明实施例中,可以根据应用软件依据自身的故障处理检测手段对故障的处理结果和应用软件继续执行业务流程是否顺利等因素确定应用软件的系统性能。评价时,可以依据某一类故障对应用软件对此类故障的处理能力进行评价,也可以对维护的各类故障进行注入,整体评价应用软件的故障处理能力。
本发明实施例可以通过可视化界面进行选择和编辑,通过TCP/IP协议进行故障远程注入,应用软件接收故障描述信息,通过故障编码索引,进行相应故障的配置。当应用软件进入故障状态后,会触发应用软件的故障处理机制,进行故障的判断和解除,从而完成系统测试,提高系统的可靠性和安全性。如果应用软件不具备故障处理机制,则通过TCP/IP协议与远程的局域网设备进行通信,由用户(专家)对故障进行解除。或者应用软件的故障处理机制无法解除该故障,通过TCP/IP协议与远程的局域网设备进行通信,由用户(专家)对故障进行解除或者由用户(专家)删除配置的故障描述信息,以使得应用程序检测其他的故障是否能够成功解除,未解除的故障由应用软件开发人员解决对应的故障处理。
如图5所示,本发明的实施例还提供了一种故障注入装置500。该故障注入装置500包括:故障通信模块510、故障设置模块520、业务流程模块530、故障处理模块540和性能评价模块550。
其中,故障通信模块510,适于接收用户配置的故障描述信息;根据故障描述信息获取故障类型、故障参数和故障信息;故障设置模块520,适于根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;业务流程模块530,适于响应于用户启动应用软件的操作,执行应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;故障处理模块540,适于对故障状态进行处理;当故障解除时,继续执行应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及性能评价模块550,适于根据故障状态处理结果确定应用软件的系统性能。
根据本发明的一种实施方式,故障通信模块510还可以适于:在根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息之后,向用户反馈故障配置完成的信息。
根据本发明的一种实施方式,故障注入装置500还可以包括:维护模块,适于维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;
根据本发明的一种实施方式,故障通信模块510根据故障描述信息获取故障类型、故障参数和故障信息可以为:通过故障描述信息,匹配对应的故障编码,通过故障编码查找到对应的故障类型、故障参数和故障信息。
根据本发明的一种实施方式,业务流程模块530响应于用户启动应用软件的操作,执行应用软件对应的业务流程可以为:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行应用软件对应的业务流程。
根据本发明的一种实施方式,故障处理模块540对故障状态进行处理可以为:逐个对故障状态进行故障分析,并基于应用程序的纠错流程对故障状态进行处理。
根据本发明的一种实施方式,性能评价模块550根据故障状态处理结果确定应用软件的系统性能可以为:根据应用程序的纠错流程对故障状态的处理结果和继续执行应用软件对应的业务流程的程度确定应用软件的系统性能。
根据本发明的一种实施方式,故障通信模块510接收用户配置的故障描述信息可以为:通过TCP/IP协议与局域网设备通信,接收用户通过局域网设备远程配置的故障描述信息。
根据本发明的一种实施方式,故障通信模块510还可以适于当故障未解除,反馈故障情况之后,接收用户通过局域网设备对故障状态的处理操作。
下面以通过TCP/IP协议与局域网设备通信获取用户配置的故障描述信息为例,如图6所示,说明本发明实施例的系统性能测试方法的实施过程。
步骤S601中,利用人机交互的界面,通过图形界面进行故障的选择,添加和编辑以及故障描述信息发送等操作。
步骤S602中,根据用户的故障选择确定故障的类型,配置故障参数,删除和添加故障信息等。
步骤S603中,故障配置完成后,可以通过TCP/IP协议将故障描述信息发送到应用软件。
步骤S604中,在接收到发送来的故障描述信息后,在应用软件对应的业务流程的故障位置修改参数信息,当应用软件故障配置完成后,可以把故障配置的结果通过TCP/IP协议发送到用户界面。
步骤S605中,配置不同的故障,可以有不同的故障现象,当进入故障状态时,用用程序可以进行故障的处理。
步骤S606中,应用软件有自己的故障处理执行流程和业务逻辑,以供应用软件解除故障。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,计算设备一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的系统性能测试方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的优选实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。
Claims (11)
1.一种应用软件的系统性能测试方法,包括步骤:
接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;
根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;
响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;
对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及
根据所述故障状态处理结果确定所述应用软件的系统性能。
2.如权利要求1所述的系统性能测试方法,其中,所述根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息的步骤之后还包括:
向用户反馈故障配置完成的信息。
3.如权利要求1所述的系统性能测试方法,其中,在所述接收用户配置的故障描述信息的步骤之前还包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;
根据所述故障描述信息获取故障类型、故障参数和故障信息的步骤包括:
通过所述故障描述信息,根据维护的所述对应关系匹配故障编码,通过所述故障编码查找到对应的故障类型、故障参数和故障信息。
4.如权利要求1所述的系统性能测试方法,其中,响应于用户启动应用软件的操作,执行所述应用软件对应的业务流程的步骤包括:
在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行所述应用软件对应的业务流程。
5.如权利要求4所述的系统性能测试方法,其中,对所述故障状态进行处理的步骤包括:
逐个对所述故障状态进行故障分析,并基于应用程序的纠错流程对所述故障状态进行处理。
6.如权利要求5所述的系统性能测试方法,其中,根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:
根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定所述应用软件的系统性能。
7.如权利要求1所述的系统性能测试方法,其中,所述接收用户配置的故障描述信息的步骤包括:
通过TCP/IP协议与局域网设备通信,接收用户通过所述局域网设备远程配置的故障描述信息。
8.如权利要求7所述的系统性能测试方法,其中,在所述当故障未解除时,反馈故障情况的步骤之后还包括:
接收用户通过所述局域网设备对所述故障状态的处理操作。
9.一种应用软件的系统性能测试装置,包括:
故障通信模块,适于接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;
故障设置模块,适于根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;
业务流程模块,适于响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;
故障处理模块,适于对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及
性能评价模块,适于根据所述故障状态处理结果确定所述应用软件的系统性能。
10.一种计算设备,包括:
至少一个处理器和存储有程序指令的存储器;
当所述程序指令被所述处理器读取并执行时,使得所述计算设备执行如权利要求1-8中任一项所述的应用软件的系统性能测试方法。
11.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1-8中任一项所述的应用软件的系统性能测试方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210101248.1A CN114490294A (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
CN202111324487.5A CN113778834B (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111324487.5A CN113778834B (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210101248.1A Division CN114490294A (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113778834A true CN113778834A (zh) | 2021-12-10 |
CN113778834B CN113778834B (zh) | 2022-03-18 |
Family
ID=78873661
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111324487.5A Active CN113778834B (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
CN202210101248.1A Pending CN114490294A (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210101248.1A Pending CN114490294A (zh) | 2021-11-10 | 2021-11-10 | 一种应用软件的系统性能测试方法、装置与计算设备 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN113778834B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114443334A (zh) * | 2021-12-29 | 2022-05-06 | 海南乾唐视联信息技术有限公司 | 故障信息的复现方法、装置、复现故障设备和存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040194063A1 (en) * | 2003-03-28 | 2004-09-30 | Joel Pereira | System and method for automated testing of a software module |
US20100287535A1 (en) * | 2009-05-08 | 2010-11-11 | Electronics And Telecommunications Research Institute | System and method for testing software reliability using fault injection |
US20170024299A1 (en) * | 2015-07-21 | 2017-01-26 | International Business Machines Corporation | Providing Fault Injection to Cloud-Provisioned Machines |
US20190147121A1 (en) * | 2017-11-14 | 2019-05-16 | Synopsys, Inc. | Efficient Mechanism for Interactive Fault Analysis in Formal Verification Environment |
US20190205233A1 (en) * | 2017-12-28 | 2019-07-04 | Hyundai Motor Company | Fault injection testing apparatus and method |
CN110674028A (zh) * | 2019-08-20 | 2020-01-10 | 华为技术有限公司 | 故障注入方法及其装置、业务服务系统 |
CN111766081A (zh) * | 2020-06-30 | 2020-10-13 | 三一汽车制造有限公司 | 故障注入装置、方法、设备和计算机可读存储介质 |
CN111831569A (zh) * | 2020-07-22 | 2020-10-27 | 平安普惠企业管理有限公司 | 基于故障注入的测试方法、装置、计算机设备和存储介质 |
CN112769609A (zh) * | 2020-12-30 | 2021-05-07 | 中国工商银行股份有限公司 | 控制故障模拟和模拟故障的方法、系统、介质和产品 |
-
2021
- 2021-11-10 CN CN202111324487.5A patent/CN113778834B/zh active Active
- 2021-11-10 CN CN202210101248.1A patent/CN114490294A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040194063A1 (en) * | 2003-03-28 | 2004-09-30 | Joel Pereira | System and method for automated testing of a software module |
US20100287535A1 (en) * | 2009-05-08 | 2010-11-11 | Electronics And Telecommunications Research Institute | System and method for testing software reliability using fault injection |
US20170024299A1 (en) * | 2015-07-21 | 2017-01-26 | International Business Machines Corporation | Providing Fault Injection to Cloud-Provisioned Machines |
US20190147121A1 (en) * | 2017-11-14 | 2019-05-16 | Synopsys, Inc. | Efficient Mechanism for Interactive Fault Analysis in Formal Verification Environment |
US20190205233A1 (en) * | 2017-12-28 | 2019-07-04 | Hyundai Motor Company | Fault injection testing apparatus and method |
CN109976932A (zh) * | 2017-12-28 | 2019-07-05 | 现代自动车株式会社 | 故障注入测试设备和方法 |
CN110674028A (zh) * | 2019-08-20 | 2020-01-10 | 华为技术有限公司 | 故障注入方法及其装置、业务服务系统 |
CN111766081A (zh) * | 2020-06-30 | 2020-10-13 | 三一汽车制造有限公司 | 故障注入装置、方法、设备和计算机可读存储介质 |
CN111831569A (zh) * | 2020-07-22 | 2020-10-27 | 平安普惠企业管理有限公司 | 基于故障注入的测试方法、装置、计算机设备和存储介质 |
CN112769609A (zh) * | 2020-12-30 | 2021-05-07 | 中国工商银行股份有限公司 | 控制故障模拟和模拟故障的方法、系统、介质和产品 |
Non-Patent Citations (3)
Title |
---|
K8S技术圈: "Istio 流量管理之故障注入", 《网址:HTTPS://DEVELOPER.51CTO.COM/ART/202107/674947.HTM》 * |
中国通信学会青年工作委员会主编: "《2008通信理论与技术新发展:第十三届全国青年通信学术会议论文集 上》", 31 December 2008 * |
姜琼妃: "基于嵌入式计算机软件测试关键性技术研究", 《网络信息工程》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114443334A (zh) * | 2021-12-29 | 2022-05-06 | 海南乾唐视联信息技术有限公司 | 故障信息的复现方法、装置、复现故障设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113778834B (zh) | 2022-03-18 |
CN114490294A (zh) | 2022-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108427616B (zh) | 后台程序监控方法及监控装置 | |
WO2019161619A1 (zh) | 接口自动化测试方法、装置、设备及计算机可读存储介质 | |
US11119843B2 (en) | Verifying application behavior based on distributed tracing | |
CN112445708B (zh) | 一种压力测试方法、装置及计算设备 | |
US11567756B2 (en) | Causality determination of upgrade regressions via comparisons of telemetry data | |
CN113778834B (zh) | 一种应用软件的系统性能测试方法、装置与计算设备 | |
CN113254248B (zh) | 一种故障诊断方法、系统及计算设备 | |
CN116166525A (zh) | 一种测试脚本的生成方法及装置 | |
CN107229977A (zh) | 一种主机安全基线自动加固方法及系统 | |
CN112988534A (zh) | 异常数据处理方法、装置、设备及存储介质 | |
CN117914737A (zh) | 一种网络靶场的镜像资源测试方法及装置 | |
EP3002681A1 (en) | Methods and apparatus for customizing and using a reusable database framework for fault processing applications | |
US11620076B2 (en) | Accelerated non-volatile memory device inspection and forensics | |
CN111143206A (zh) | 一种数据获取方法、装置、电子设备及存储介质 | |
US20240104085A1 (en) | Computer system and method for evaluating integrity and parsing of a file system and parsing implementation | |
CN112819554B (zh) | 基于页面操作的业务处理方法、装置、计算机设备 | |
CN118656099B (zh) | 一种车辆控制器升级方法、系统及电子设备 | |
CN112947948B (zh) | 应用服务的部署方法及装置 | |
EP4300306A1 (en) | Streaming media processing method and apparatus based on inference service and electronic device | |
CN111325278B (zh) | 一种图像处理方法、装置及存储介质 | |
CN118689649A (zh) | 本地虚拟化资源迁移方法、系统、电子设备与存储介质 | |
CN117235043A (zh) | 数据库迁移方法、装置、电子设备及介质 | |
CN117762533A (zh) | 业务数据的多环节流程处理方法、装置及电子设备 | |
CN116723174A (zh) | 一种基于智能网关的动态ip修改方法和系统 | |
CN118332553A (zh) | 用于检查产品的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |