CN113778834B - 一种应用软件的系统性能测试方法、装置与计算设备 - Google Patents

一种应用软件的系统性能测试方法、装置与计算设备 Download PDF

Info

Publication number
CN113778834B
CN113778834B CN202111324487.5A CN202111324487A CN113778834B CN 113778834 B CN113778834 B CN 113778834B CN 202111324487 A CN202111324487 A CN 202111324487A CN 113778834 B CN113778834 B CN 113778834B
Authority
CN
China
Prior art keywords
fault
application software
information
user
system performance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111324487.5A
Other languages
English (en)
Other versions
CN113778834A (zh
Inventor
杨伟彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Uniontech Software Technology Co Ltd
Original Assignee
Uniontech Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Uniontech Software Technology Co Ltd filed Critical Uniontech Software Technology Co Ltd
Priority to CN202111324487.5A priority Critical patent/CN113778834B/zh
Priority to CN202210101248.1A priority patent/CN114490294A/zh
Publication of CN113778834A publication Critical patent/CN113778834A/zh
Application granted granted Critical
Publication of CN113778834B publication Critical patent/CN113778834B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0654Management of faults, events, alarms or notifications using network fault recovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields

Abstract

本发明公开了一种应用软件的系统性能测试方法、装置与计算设备,包括:接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;以及对所述故障状态进行处理;当故障解除时,继续执行对应的业务流程;当故障未解除时,反馈故障情况,根据所述故障状态处理结果确定所述应用软件的系统性能。本申请通过故障注入的方式,检查应用程序的故障处理能力。

Description

一种应用软件的系统性能测试方法、装置与计算设备
技术领域
本发明涉及软件故障模拟技术领域,尤其是一种应用软件的系统性能测试方法、装置与计算设备。
背景技术
随着软件应用的不断深入,软件的规模和复杂度不断增加,软件错误发生的概率也在增大。而各种软件内嵌于安全关键系统而言,一旦发生故障,造成的后果非常严重。比如:自动驾驶系统、核反应堆系统、金融证券管理系统等安全关键系统,软件一旦发生故障,会导致系统直接或者间接的处于危险状态。上述系统有自己的故障处理检测手段,避免发生大的风险。但是有些故障往往是概率性的,不是每次都能显现出来,有时候很难去复现和排查,为了测试故障检测和处理的效果,一般采用人为的注入故障,然后看故障的检测系统是否起到作用。
现有技术中对应用软件的系统性能测试时多采用基于硬件的故障注入方式,而对于从软件上去解决的思路比较少。因此,需要一种利用软件模拟方式进行应用软件的系统性能的测试方法。
发明内容
为此,本发明提供了一种应用软件的系统性能测试方法、装置与计算设备,以力图解决或者至少缓解上面存在的至少一个问题。
根据本发明的一个方面,提供了一种应用软件的系统性能测试方法,包括步骤:接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及根据所述故障状态处理结果确定所述应用软件的系统性能。
可选地,在根据本发明的系统性能测试方法中,所述根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息的步骤之后还包括:向用户反馈故障配置完成的信息。
可选地,在根据本发明的系统性能测试方法中,在所述接收用户配置的故障描述信息的步骤之前还包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;根据所述故障描述信息获取故障类型、故障参数和故障信息的步骤包括:通过故障描述信息,匹配对应的故障编码,通过所述故障编码查找到对应的故障类型、故障参数和故障信息。
可选地,在根据本发明的系统性能测试方法中,响应于用户启动应用软件的操作,执行所述应用软件对应的业务流程的步骤包括:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行所述应用软件对应的业务流程。
可选地,在根据本发明的系统性能测试方法中,对所述故障状态进行处理的步骤包括:逐个对所述故障状态进行故障分析,并基于应用程序的纠错流程对所述故障状态进行处理。
可选地,在根据本发明的系统性能测试方法中,根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定所述应用软件的系统性能。
可选地,在根据本发明的系统性能测试方法中,所述接收用户配置的故障描述信息的步骤包括:通过TCP/IP协议与局域网设备通信,接收用户通过所述局域网设备远程配置的故障描述信息。
可选地,在根据本发明的系统性能测试方法中,在所述当故障未解除,反馈故障情况的步骤之后还包括:接收用户通过所述局域网设备对所述故障状态的处理操作。
根据本发明的另一方面,还提供了一种应用软件的系统性能测试装置,包括:故障通信模块,适于接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;故障设置模块,适于根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;业务流程模块,适于响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;故障处理模块,适于对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及性能评价模块,适于根据所述故障状态处理结果确定所述应用软件的系统性能。
根据本发明的另一方面,还提供了一种计算设备,包括:至少一个处理器和存储有程序指令的存储器;当程序指令被处理器读取并执行时,使得计算设备执行如上的系统性能测试方法。
根据本发明的再一方面,还提供了一种存储有程序指令的可读存储介质,当程序指令被计算设备读取并执行时,使得计算设备执行如上的系统性能测试方法。
根据本发明的系统性能测试方法、装置与计算设备,能够实现以下有益效果中的至少一种:
通过本申请的应用软件的系统性能测试方法通过故障注入的方式,对于一些概率性的故障,实现复现和排查,检查应用程序的故障处理能力,帮助应用软件完成故障检测和处理,实现应用程序系统性能的测试。
本申请根据应用软件测试的场景,将相应的故障进行注入;还能通过远程控制方式进行相关操作,完成故障的注入,使操作更加灵活多样。
本申请通过故障注入,进行相应故障的配置,当应用软件进入故障状态后,会触发应用软件进行故障的判断和解除,从而完成应用软件处理故障能力的测试,提高系统的可靠性和安全性。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的计算设备100的示意图;
图2示出了根据本发明一个实施例的应用软件的系统性能测试方法200的流程图;
图3示出了根据本发明一个实施例的故障描述信息的查找的示意图;
图4示出了根据本发明一个实施例的对故障状态进行故障处理的示意图;
图5示出了根据本发明一个实施例的应用软件的系统性能测试装置500的结构示意图;
图6示出了根据本发明一个实施例的故障注入过程的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明的系统性能测试方法在计算设备中执行。计算设备可以是任意具有存储和计算能力的设备,其例如可以实现为服务器、工作站等,也可以实现为桌面计算机、笔记本计算机等个人配置的计算机,或者实现为手机、平板电脑、智能可穿戴设备、物联网设备等终端设备,但不限于此。
图1示出了根据本发明一个实施例的计算设备100的示意图。需要说明的是,图1所示的计算设备100仅为一个示例,在实践中,用于实施本发明的系统性能测试方法的计算设备可以是任意型号的设备,其硬件配置情况可以与图1所示的计算设备100相同,也可以与图1所示的计算设备100不同。实践中用于实施本发明的系统性能测试方法的计算设备可以对图1所示的计算设备100的硬件组件进行增加或删减,本发明对计算设备的具体硬件配置情况不做限制。
如图1所示,在基本的配置102中,计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。
取决于期望的配置,处理器104可以是任何类型的处理,包括但不限于:微处理器(µP)、微控制器(µC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用,或者在一些实现中,存储器控制器118可以是处理器104的一个内部部分。
取决于期望的配置,系统存储器106可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。计算设备中的物理内存通常指的是易失性存储器RAM,磁盘中的数据需要加载至物理内存中才能够被处理器104读取。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。在一些实施方式中,应用122可以布置为在操作系统上由一个或多个处理器104利用程序数据124执行指令。操作系统120例如可以是Linux、Windows等,其包括用于处理基本系统服务以及执行依赖于硬件的任务的程序指令。应用122包括用于实现各种用户期望的功能的程序指令,应用122例如可以是浏览器、即时通讯软件、软件开发工具(例如集成开发环境IDE、编译器等)等,但不限于此。当应用122被安装到计算设备100中时,可以向操作系统120添加驱动模块。
在计算设备100启动运行时,处理器104会从存储器106中读取操作系统120的程序指令并执行。应用122运行在操作系统120之上,利用操作系统120以及底层硬件提供的接口来实现各种用户期望的功能。当用户启动应用122时,应用122会加载至存储器106中,处理器104从存储器106中读取并执行应用122的程序指令。
计算设备100还包括储存设备132,储存设备132包括可移除储存器136和不可移除储存器138,可移除储存器136和不可移除储存器138均与储存接口总线134连接。
计算设备100还可以包括有助于从各种接口设备(例如,输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156,它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160,其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
在根据本发明的计算设备100中,应用122包括用于执行本发明的系统性能测试方法200的指令,该指令可以指示处理器104执行本发明的系统性能测试方法200,以通过自动刻录检验而避免文件系统的紊乱、数据损坏和乱码等。
图2示出了根据本发明一个实施例的用于系统性能测试方法200的流程图。系统性能测试方法200在计算设备(例如前述计算设备100)中执行,通过故障注入,进行相应故障的配置,当应用软件进入故障状态后,会触发应用软件进行故障的判断和解除,从而完成应用软件系统性能的测试,提高系统的可靠性和安全性。如图2所示,方法200可以包括步骤S210至步骤S250。
在步骤S210中,接收用户配置的故障描述信息;根据故障描述信息获取故障类型、故障参数和故障信息。
根据本发明的一种实施方式,在步骤S210之前还可以包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系。
根据本发明的一种实施方式,步骤S210中根据故障描述信息获取故障类型、故障参数和故障信息的步骤可以包括:通过故障描述信息,根据维护的对应关系匹配故障编码,通过故障编码查找到对应的故障类型、故障参数和故障信息。
实际操作过程中,如图3所示,用户可以在图形界面上选择相应的故障,如Fault1、Fault 2……Fault n,每种故障有对应的故障描述信息,如信息1、信息2……信息n,根据故障描述信息可以使用户知道配置的是哪种故障。然后,根据故障描述信息对应的故障编码/ID,通过故障编码/ID,可以找到对应的参数,不同的故障对应不同的参数列表,如参数列表1、参数列表2……参数列表n,这些故障相关的信息可以存放在数据库中,便于查找和修改。
根据本发明的一种实施方式,步骤S210中接收用户配置的故障描述信息的步骤可以包括:通过TCP/IP协议与局域网设备通信,接收用户通过局域网设备远程配置的故障描述信息。
其中,TCP/IP:(Transmission Control Protocol/Internet Protocol,传输控制协议/网际协议)为能够在多个不同网络间实现信息传输的协议簇。例如FTP(FileTransfer Protocol,文件传输协议)、SMTP(Simple Mail Transfer Protocol,简单邮件传输协议)、TCP、UDP(User Datagram Protocol,用户数据报协议)、IP等协议。
本发明实施例中,故障注入与应用软件的通讯方式可以采用TCP/IP协议,利用Socket网络通讯技术,实现故障信息之间的相互交换。因此,故障注入的形式可以是远程方式进行故障注入,在一个局域网段内即可进行通信。
在步骤S220中,根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息。
本发明实施例中,用户可以在故障注入过程中可以通过图形化界面选择故障类型,进行相应的故障配置,配置完成之后,根据故障相关的信息在业务流程的故障位置修改参数信息。
根据本发明的一种实施方式,步骤S220之后还可以包括:向用户反馈故障配置完成的信息。
本发明实施例中,在参数信息设置完成后,将故障配置完成的信息反馈至用户,可以在图形界面显示故障配置完成的信息。
在步骤S230中,响应于用户启动应用软件的操作,执行应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态。
根据本发明的一种实施方式,步骤S230中响应于用户启动应用软件的操作,执行应用软件对应的业务流程的步骤可以包括:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行应用软件对应的业务流程。
本发明实施例中,当用户再次启动应用软件,应用软件开始执行相应的业务流程,当执行到故障位置时,会出现故障现象,此时应用软件的故障处理机制会对故障进行处理,分析故障原因并解除故障,如果故障解除,会继续业务流程的执行,如果后序再次遇到故障现象,会继续触发故障处理机制,进行故障处理和故障解除;如果后序没有遇到故障现象,应用软件执行直至结束。
在步骤S240中,对故障状态进行处理;当故障解除时,继续执行应用软件对应的业务流程;当故障未解除时,反馈故障情况。
根据本发明的一种实施方式,步骤S240中对故障状态进行处理的步骤可以包括:逐个对故障状态进行故障分析,并基于应用程序的纠错流程对故障状态进行处理。
本发明实施例中,在应用软件中,一般包含故障处理机制,用来进行故障的解除。如图4所示,当收到故障描述信息后,可以根据故障编码/ID索引数据库,找到对应的故障参数列表,如参数列表1、参数列表2……参数列表n,根据参数列表中的信息,可以找到应用软件对应的业务流程中需要配置故障的位置,如Fault Position 1、Fault Position 2……Fault Position n,然后启动应用软件,应用软件执行对应的业务流程,如流程1、流程2……流程n,在相应的故障位置,会出现相应的故障,如Fault 1、Fault 2……Fault n,进入故障状态呈现出故障现象。然后通过对故障的处理与分析,可以包括故障判断、故障分析、故障处理,专家诊断等过程,将故障进行解除。从而继续应用软件的执行,如果后续还有其他故障,则继续重复上面步骤,否则的话,运行直至软件关闭。
根据本发明的一种实施方式,步骤S240中当故障未解除时,反馈故障情况之后还可以包括:接收用户通过局域网设备对故障状态的处理操作。
在步骤S250中,根据故障状态处理结果确定所述应用软件的系统性能。
本发明实施例中,步骤S250根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定应用软件的系统性能。
本发明实施例中,可以根据应用软件依据自身的故障处理检测手段对故障的处理结果和应用软件继续执行业务流程是否顺利等因素确定应用软件的系统性能。评价时,可以依据某一类故障对应用软件对此类故障的处理能力进行评价,也可以对维护的各类故障进行注入,整体评价应用软件的故障处理能力。
本发明实施例可以通过可视化界面进行选择和编辑,通过TCP/IP协议进行故障远程注入,应用软件接收故障描述信息,通过故障编码索引,进行相应故障的配置。当应用软件进入故障状态后,会触发应用软件的故障处理机制,进行故障的判断和解除,从而完成系统测试,提高系统的可靠性和安全性。如果应用软件不具备故障处理机制,则通过TCP/IP协议与远程的局域网设备进行通信,由用户(专家)对故障进行解除。或者应用软件的故障处理机制无法解除该故障,通过TCP/IP协议与远程的局域网设备进行通信,由用户(专家)对故障进行解除或者由用户(专家)删除配置的故障描述信息,以使得应用程序检测其他的故障是否能够成功解除,未解除的故障由应用软件开发人员解决对应的故障处理。
如图5所示,本发明的实施例还提供了一种故障注入装置500。该故障注入装置500包括:故障通信模块510、故障设置模块520、业务流程模块530、故障处理模块540和性能评价模块550。
其中,故障通信模块510,适于接收用户配置的故障描述信息;根据故障描述信息获取故障类型、故障参数和故障信息;故障设置模块520,适于根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息;业务流程模块530,适于响应于用户启动应用软件的操作,执行应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;故障处理模块540,适于对故障状态进行处理;当故障解除时,继续执行应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及性能评价模块550,适于根据故障状态处理结果确定应用软件的系统性能。
根据本发明的一种实施方式,故障通信模块510还可以适于:在根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息之后,向用户反馈故障配置完成的信息。
根据本发明的一种实施方式,故障注入装置500还可以包括:维护模块,适于维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;
根据本发明的一种实施方式,故障通信模块510根据故障描述信息获取故障类型、故障参数和故障信息可以为:通过故障描述信息,匹配对应的故障编码,通过故障编码查找到对应的故障类型、故障参数和故障信息。
根据本发明的一种实施方式,业务流程模块530响应于用户启动应用软件的操作,执行应用软件对应的业务流程可以为:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行应用软件对应的业务流程。
根据本发明的一种实施方式,故障处理模块540对故障状态进行处理可以为:逐个对故障状态进行故障分析,并基于应用程序的纠错流程对故障状态进行处理。
根据本发明的一种实施方式,性能评价模块550根据故障状态处理结果确定应用软件的系统性能可以为:根据应用程序的纠错流程对故障状态的处理结果和继续执行应用软件对应的业务流程的程度确定应用软件的系统性能。
根据本发明的一种实施方式,故障通信模块510接收用户配置的故障描述信息可以为:通过TCP/IP协议与局域网设备通信,接收用户通过局域网设备远程配置的故障描述信息。
根据本发明的一种实施方式,故障通信模块510还可以适于当故障未解除,反馈故障情况之后,接收用户通过局域网设备对故障状态的处理操作。
下面以通过TCP/IP协议与局域网设备通信获取用户配置的故障描述信息为例,如图6所示,说明本发明实施例的系统性能测试方法的实施过程。
步骤S601中,利用人机交互的界面,通过图形界面进行故障的选择,添加和编辑以及故障描述信息发送等操作。
步骤S602中,根据用户的故障选择确定故障的类型,配置故障参数,删除和添加故障信息等。
步骤S603中,故障配置完成后,可以通过TCP/IP协议将故障描述信息发送到应用软件。
步骤S604中,在接收到发送来的故障描述信息后,在应用软件对应的业务流程的故障位置修改参数信息,当应用软件故障配置完成后,可以把故障配置的结果通过TCP/IP协议发送到用户界面。
步骤S605中,配置不同的故障,可以有不同的故障现象,当进入故障状态时,用用程序可以进行故障的处理。
步骤S606中,应用软件有自己的故障处理执行流程和业务逻辑,以供应用软件解除故障。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,计算设备一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的系统性能测试方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的优选实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。

Claims (9)

1.一种应用软件的系统性能测试方法,包括步骤:
接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;
根据故障类型、故障参数和故障信息找到对应的故障参数列表,根据参数列表中的信息,在应用软件对应的业务流程的故障位置修改参数信息;
响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;
对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及
根据所述故障状态处理结果确定所述应用软件的系统性能;
响应于用户启动应用软件的操作,执行所述应用软件对应的业务流程的步骤包括:
在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行所述应用软件对应的业务流程;
所述接收用户配置的故障描述信息的步骤包括:
通过TCP/IP协议与局域网设备通信,接收用户通过所述局域网设备远程配置的故障描述信息;
当故障未解除时,接收用户对故障进行解除或者删除配置的故障描述信息,以使得应用程序检测其他的故障是否能够成功解除。
2.如权利要求1所述的系统性能测试方法,其中,所述根据故障类型、故障参数和故障信息在应用软件对应的业务流程的故障位置修改参数信息的步骤之后还包括:
向用户反馈故障配置完成的信息。
3.如权利要求1所述的系统性能测试方法,其中,在所述接收用户配置的故障描述信息的步骤之前还包括:维护故障描述信息、故障编码与故障类型、故障参数和故障信息的对应关系;
根据所述故障描述信息获取故障类型、故障参数和故障信息的步骤包括:
通过所述故障描述信息,根据维护的所述对应关系匹配故障编码,通过所述故障编码查找到对应的故障类型、故障参数和故障信息。
4.如权利要求1所述的系统性能测试方法,其中,对所述故障状态进行处理的步骤包括:
逐个对所述故障状态进行故障分析,并基于应用程序的纠错流程对所述故障状态进行处理。
5.如权利要求4所述的系统性能测试方法,其中,根据所述故障状态处理结果确定所述应用软件的系统性能的步骤包括:
根据所述应用程序的纠错流程对所述故障状态的处理结果和继续执行所述应用软件对应的业务流程的程度确定所述应用软件的系统性能。
6.如权利要求1所述的系统性能测试方法,其中,在所述当故障未解除时,反馈故障情况的步骤之后还包括:
接收用户通过所述局域网设备对所述故障状态的处理操作。
7.一种应用软件的系统性能测试装置,包括:
故障通信模块,适于接收用户配置的故障描述信息;根据所述故障描述信息获取故障类型、故障参数和故障信息;
故障设置模块,适于根据故障类型、故障参数和故障信息找到对应的故障参数列表,根据参数列表中的信息,在应用软件对应的业务流程的故障位置修改参数信息;
业务流程模块,适于响应于用户启动所述应用软件的操作,执行所述应用软件对应的业务流程,当执行到故障位置时,基于配置的参数信息进入故障状态;
故障处理模块,适于对所述故障状态进行处理;当故障解除时,继续执行所述应用软件对应的业务流程;当故障未解除时,反馈故障情况;以及
性能评价模块,适于根据所述故障状态处理结果确定所述应用软件的系统性能;
业务流程模块响应于用户启动应用软件的操作,执行应用软件对应的业务流程适于:在接收到用户启动应用软件的操作时,基于配置的参数信息,按照预设的配置顺序,逐个执行应用软件对应的业务流程;
故障通信模块接收用户配置的故障描述信息适于:通过TCP/IP协议与局域网设备通信,接收用户通过局域网设备远程配置的故障描述信息;
故障处理模块当故障未解除时,适于:接收用户对故障进行解除或者删除配置的故障描述信息,以使得应用程序检测其他的故障是否能够成功解除。
8.一种计算设备,包括:
至少一个处理器和存储有程序指令的存储器;
当所述程序指令被所述处理器读取并执行时,使得所述计算设备执行如权利要求1-6中任一项所述的应用软件的系统性能测试方法。
9.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1-6中任一项所述的应用软件的系统性能测试方法。
CN202111324487.5A 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备 Active CN113778834B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111324487.5A CN113778834B (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备
CN202210101248.1A CN114490294A (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111324487.5A CN113778834B (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202210101248.1A Division CN114490294A (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备

Publications (2)

Publication Number Publication Date
CN113778834A CN113778834A (zh) 2021-12-10
CN113778834B true CN113778834B (zh) 2022-03-18

Family

ID=78873661

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210101248.1A Pending CN114490294A (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备
CN202111324487.5A Active CN113778834B (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202210101248.1A Pending CN114490294A (zh) 2021-11-10 2021-11-10 一种应用软件的系统性能测试方法、装置与计算设备

Country Status (1)

Country Link
CN (2) CN114490294A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114443334A (zh) * 2021-12-29 2022-05-06 海南乾唐视联信息技术有限公司 故障信息的复现方法、装置、复现故障设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109976932A (zh) * 2017-12-28 2019-07-05 现代自动车株式会社 故障注入测试设备和方法
CN110674028A (zh) * 2019-08-20 2020-01-10 华为技术有限公司 故障注入方法及其装置、业务服务系统
CN111831569A (zh) * 2020-07-22 2020-10-27 平安普惠企业管理有限公司 基于故障注入的测试方法、装置、计算机设备和存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040194063A1 (en) * 2003-03-28 2004-09-30 Joel Pereira System and method for automated testing of a software module
KR101269549B1 (ko) * 2009-05-08 2013-06-04 한국전자통신연구원 오류 주입을 이용한 소프트웨어 신뢰성 테스트 시스템 및 방법
US9753826B2 (en) * 2015-07-21 2017-09-05 International Business Machines Corporation Providing fault injection to cloud-provisioned machines
US11010522B2 (en) * 2017-11-14 2021-05-18 Synopsys, Inc. Efficient mechanism for interactive fault analysis in formal verification environment
CN111766081A (zh) * 2020-06-30 2020-10-13 三一汽车制造有限公司 故障注入装置、方法、设备和计算机可读存储介质
CN112769609B (zh) * 2020-12-30 2023-04-07 中国工商银行股份有限公司 控制故障模拟和模拟故障的方法、系统、介质和产品

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109976932A (zh) * 2017-12-28 2019-07-05 现代自动车株式会社 故障注入测试设备和方法
CN110674028A (zh) * 2019-08-20 2020-01-10 华为技术有限公司 故障注入方法及其装置、业务服务系统
CN111831569A (zh) * 2020-07-22 2020-10-27 平安普惠企业管理有限公司 基于故障注入的测试方法、装置、计算机设备和存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Istio 流量管理之故障注入;k8s技术圈;《网址:https://developer.51cto.com/art/202107/674947.htm》;20210728;第1-6页 *
基于嵌入式计算机软件测试关键性技术研究;姜琼妃;《网络信息工程》;20210905(第17期);第88-90页 *

Also Published As

Publication number Publication date
CN114490294A (zh) 2022-05-13
CN113778834A (zh) 2021-12-10

Similar Documents

Publication Publication Date Title
WO2019161619A1 (zh) 接口自动化测试方法、装置、设备及计算机可读存储介质
US11119843B2 (en) Verifying application behavior based on distributed tracing
US11567756B2 (en) Causality determination of upgrade regressions via comparisons of telemetry data
CN113778834B (zh) 一种应用软件的系统性能测试方法、装置与计算设备
CN112445708A (zh) 一种压力测试方法、装置及计算设备
CN116166525A (zh) 一种测试脚本的生成方法及装置
US8924957B1 (en) Systems and methods for simultaneously installing user-input-dependent software packages on multiple devices
CN114189553A (zh) 一种流量回放方法、系统及计算设备
CN112988534A (zh) 异常数据处理方法、装置、设备及存储介质
WO2021183382A1 (en) Graph-based method for inductive bug localization
CN111400085A (zh) 事务回滚异常的处理方法、装置、计算机设备及存储介质
EP3002681A1 (en) Methods and apparatus for customizing and using a reusable database framework for fault processing applications
US20220121390A1 (en) Accelerated non-volatile memory device inspection and forensics
CN113254248A (zh) 一种故障诊断方法、系统及计算设备
CN113850664A (zh) 一种数据异常检测方法及数据上报服务
CN113722203A (zh) 程序测试方法及装置、电子设备和计算机可读存储介质
CN111143206A (zh) 一种数据获取方法、装置、电子设备及存储介质
US20240104085A1 (en) Computer system and method for evaluating integrity and parsing of a file system and parsing implementation
CN113703916B (zh) 面向异常检测的云虚拟机生命周期状态依赖关系提取方法
CN112819554B (zh) 基于页面操作的业务处理方法、装置、计算机设备
CN111325278B (zh) 一种图像处理方法、装置及存储介质
CN112947948B (zh) 应用服务的部署方法及装置
EP4300306A1 (en) Streaming media processing method and apparatus based on inference service and electronic device
CN117235043A (zh) 数据库迁移方法、装置、电子设备及介质
CN117762533A (zh) 业务数据的多环节流程处理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant