CN107832231A - 一种系统测试方法、装置及介质 - Google Patents

Abstract

本发明公开了一种系统测试方法、装置及介质，该方法的步骤包括：依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤；其中，各原子操作步骤均有对应测试代码，N为大于1的整数；根据测试需求设定目标测试用例；其中，目标测试用例的内容至少包括测试逻辑以及测试参数；获取执行测试逻辑所需的目标原子操作步骤，以查得与目标原子操作步骤对应的目标测试代码，并依照测试逻辑，对目标测试代码进行组合以生成测试脚本；将测试参数作为测试脚本的测试输入数据，并执行测试脚本以得到测试结果。本方法提高了系统测试的灵活性、全面性，并且相对提高了测试效率。此外，本发明还提供一种系统测试装置及介质，有益效果如上所述。

Description

一种系统测试方法、装置及介质

技术领域

本发明涉及自动化测试领域，特别是涉及一种系统测试方法、装置及介质。

背景技术

为了保证软件系统或操作系统的高可用性，在将其投入使用前，需要先进行可用性测试，通过对系统的测试以尽可能的避免系统bug的存在，因此自动化测试目前已经广泛被应用于行业软件测试中。

随着大数据时代的到来，每时每刻都在产生着海量的新数据，为了解决对于庞大的数据处理，云计算系统应运而生。云计算是分布式计算、并行计算、效用计算、网络存储、虚拟化、负载均衡、热备份冗余等传统计算机和网络技术发展融合的产物，并且类似于云计算系统的庞大系统随着大数据时代的发展而不断产生。由于以云计算系统为首的大型系统的组成设备以及相关软件数量众多，因此保证系统整体的高可用性的难度更大。当前对于系统的自动化测试主要是通过编写固定的测试脚本，测试脚本中主要为关键测试步骤的代码罗列，并且测试脚本与测试用例之间往往是唯一对应的关系，因此测试的灵活性较差，并且测试内容覆盖度不高的情况下，测试内容往往不全面，并且需要测试人员根据不同的测试用例设置对应的测试脚本，降低了测试效率。

由此可见，提供一种系统测试方法，以提高系统测试的灵活性、全面性，并且相对提高测试效率，是本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种系统测试方法、装置及介质，以提高系统测试的灵活性、全面性，并且相对提高测试效率。

为解决上述技术问题，本发明提供一种系统测试方法，包括：

依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤；其中，各原子操作步骤均有对应测试代码，N为大于1的整数；

根据测试需求设定目标测试用例；其中，目标测试用例的内容至少包括测试逻辑以及测试参数；

获取执行测试逻辑所需的目标原子操作步骤，以查得与目标原子操作步骤对应的目标测试代码，并依照测试逻辑，对目标测试代码进行组合以生成测试脚本；

将测试参数作为测试脚本的测试输入数据，并执行测试脚本以得到测试结果。

优选的，目标测试用例具体由不同业务操作流程的测试用例依照预设的组合规则组合而成。

优选的，组合规则包括：

将存在逻辑关系的各测试用例进行组合，以及将不存在逻辑关系的各测试用例进行组合。

优选的，测试参数具体包括等价类参数以及边界值参数。

优选的，目标测试用例的内容还包括预期结果；

相应的，该方法进一步包括：

将测试结果与预期结果进行比对，并将比对结果记录至测试报告。

优选的，待测系统具体为云计算系统。

此外，本发明还提供一种系统测试装置，包括：

操作划分模块，用于依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤；

用例设置模块，用于根据测试需求设定目标测试用例；

脚本生成模块，用于获取执行测试逻辑所需的目标原子操作步骤，以查得与目标原子操作步骤对应的目标测试代码，并依照测试逻辑，对目标测试代码进行组合以生成测试脚本；

结果获取模块，用于将测试参数作为测试脚本的测试输入数据，并执行测试脚本以得到测试结果。

优选的，该装置进一步包括：

报告记录模块，用于将测试结果与预期结果进行比对，并将比对结果记录至测试报告。

此外，本发明还提供一种系统测试装置，包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序时实现如上述的系统测试方法的步骤。

此外，本发明还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述的系统测试方法的步骤。

本发明所提供的系统测试方法，将待测系统完整的一系列操作流程划分为原子操作步骤，实现了对操作内容的细化，并且每一个原子操作步骤都有对应的测试代码对其可用性进行测试，进而能够根据测试用例所记载的目标原子操作步骤，并找到测试各目标原子操作步骤的测试代码，进而根据测试逻辑将测试代码进行组合成为测试脚本，并将测试参数作为测试脚本的测试输入数据，执行测试脚本以得到测试结果。由于本方法能够将完整的操作流程划分为操作单元的形式，即原子操作步骤，并且对于原子操作步骤均有对应的测试代码，实现了对于测试的内容的相对细化。可见本方法不拘泥于编写固定的测试脚本以进行测试，而是可以根据实际的测试需求灵活的对测试内容的进行组合，以生成测试脚本，因此能够根据实际的测试情况，通过设定测试用例而有针对性的生成测试脚本，因此测试内容相对更加全面，并且不需要测试人员频繁修改测试脚本以确保其可用性，保证了整体效率。此外，本发明还提供一种系统测试装置及介质，有益效果如上所述。

附图说明

为了更清楚地说明本发明实施例，下面将对实施例中所需要使用的附图做简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种系统测试方法的流程图；

图2为本发明实施例提供的一种系统测试装置结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下，所获得的所有其他实施例，都属于本发明保护范围。

本发明的核心是提供一种系统测试方法，以提高系统测试的灵活性、全面性，并且相对提高测试效率。本发明的另一核心是提供一种系统测试装置及介质。

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。

实施例一

图1为本发明实施例提供的一种系统测试方法的流程图。请参考图1，系统测试方法的具体步骤包括：

步骤S10：依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤。

其中，各原子操作步骤均有对应测试代码，N为大于1的整数。

需要说明的是，在本步骤中所指的业务操作流程所指的是使用该待测系统实现某一功能或是某些功能而需要执行的一系列操作流程，而原子操作是将一系列流程进行拆分而得到的，并在后续步骤中可进行灵活组合的单元操作步骤，需要说明的是，为了保证每一个原子操作步骤的独立性，以及原子操作步骤之间可灵活组合，各原子操作步骤应该均能独立执行。另外，业务操作流程与原子操作步骤之间是均可以根据实际情况而定，原子操作步骤包含于业务操作流程中。业务操作流程可以为系统中重要业务的操作流程，例如当前的某一系统业务流程为“登录并上传文件”，可以将“登录”以及“上传”分别作为原子操作步骤，也可以在“登录”的基础上进一步划分为“输入用户名”、“输入密码”和“点击登录按键”以作为原子操作步骤；同理，可以在“上传”的基础上进一步划分为“选择上传文件”以及“点击上传按键”以作为原子操作步骤。因此用于划分原子操作步骤的预设标准可以根据测试的细致程度而定，在此不做具体限定。另外，可以理解的是，每一个原子操作步骤均有对应测试代码用于对该原子操作步骤进行测试。

步骤S11：根据测试需求设定目标测试用例。

其中，目标测试用例的内容至少包括测试逻辑以及测试参数。

需要说明的是，测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，以对某个程序的执行进行具有针对性的可用性测试。因此，完成基本的测试执行需要测试用例提供对于测试的具体操作逻辑以及执行相关测试时提供的测试参数，为了每个测试用例的测试内容明确，可以针对于一种测试用例仅提供一组测试参数。例如在“输入用户名”的某一个测试用例的主要目的为“测试输入字符长度超过预设值时的情况”，该测试用例的测试参数为超过预设值长度的字符，进而实现测试用例与测试参数明确对应。

步骤S12：获取执行测试逻辑所需的目标原子操作步骤，以查得与目标原子操作步骤对应的目标测试代码，并依照测试逻辑，对目标测试代码进行组合以生成测试脚本。

可以理解的是，本步骤的目的是根据测试逻辑中所需要进行的操作内容获取对应的原子操作步骤。例如，当前测试逻辑是“登录后上传”，即通过用户名以及密码进行登录，登录后选择文件进行上传，则所选取相应的目标原子操作步骤可以为“输入用户名”、“输入密码”、“点击登录按键”、“选择上传文件”以及“点击上传按键”，进而根据原子操作步骤之间的逻辑顺序将目标原子操作步骤对应的测试代码进行组合以生成测试脚本。可以理解的是，由于测试时需要涉及到更加全面的测试内容，因此逻辑顺序可以与正常情况下的操作逻辑顺序不同，例如“在登录前上传”，用以测试能否顺利执行，进而确定多个原子操作步骤之间的制约关系是否正常，这主要与测试用例的设计有关，在此不做具体限定。

步骤S13：将测试参数作为测试脚本的测试输入数据，并执行测试脚本以得到测试结果。

需要说明的是，测试参数是测试用例所具有的用于实现该用例的参数，进而在执行测试脚本执行时作为测试输入数据以保证测试的正常进行，测试参数往往能代表测试用例的测试目的。

本发明所提供的系统测试方法，将待测系统完整的一系列操作流程划分为原子操作步骤，实现了对操作内容的细化，并且每一个原子操作步骤都有对应的测试代码对其可用性进行测试，进而能够根据测试用例所记载的目标原子操作步骤，并找到测试各目标原子操作步骤的测试代码，进而根据测试逻辑将测试代码进行组合成为测试脚本，并将测试参数作为测试脚本的测试输入数据，执行测试脚本以得到测试结果。由于本方法能够将完整的操作流程划分为操作单元的形式，即原子操作步骤，并且对于原子操作步骤均有对应的测试代码，实现了对于测试的内容的相对细化。可见本方法不拘泥于编写固定的测试脚本以进行测试，而是可以根据实际的测试需求灵活的对测试内容的进行组合，以生成测试脚本，因此能够根据实际的测试情况，通过设定测试用例而有针对性的生成测试脚本，因此测试内容相对更加全面，并且不需要测试人员频繁修改测试脚本以确保其可用性，保证了整体效率。

实施例二

在上述实施例的基础上，作为一种优选的实施方式，目标测试用例具体由不同业务操作流程的测试用例依照预设的组合规则组合而成。

需要说明的是，本实施方式中所指的目标测试用例是对不同的原子操作步骤的测试用例的组合，例如，将“用户注册”流程的测试用例、“用户登录”流程的测试用例、“文件上传”流程的测试用例组合为目标测试用例，即目标测试用例具体为“用户注册后登录进而上传文件”的综合操作流程下的测试用例，这样能够根据用户的测试需要进行更加全面的测试。

在上述实施方式的基础上，作为一种优选的实施方式，组合规则包括：

将存在逻辑关系的各测试用例进行组合，以及将不存在逻辑关系的各测试用例进行组合。

可以理解的是，为了使测试的覆盖面更广，需要将有逻辑关系的业务操作流程组合为目标测试用例，以确保有逻辑关系的业务操作流程相互配合工作；另外还需要将没有逻辑关系或是逻辑关系薄弱的业务操作流程的测试用例组合为目标测试用例，以确保没有逻辑关系的业务操作流程之间相互独立，进而保证了测试的全面性以及可靠性。

此外，作为一种优选的实施方式，测试参数具体包括等价类参数以及边界值参数。

需要说明的是，等价类参数的意义是，通过选择适当的数据子集来代表整个数据集的问题，通过将程序所有可能的参数划分成若干个等价类，进而从每个部分中选取具有代表性的等价类参数对测试用例进行合理的分类，测试用例由有效等价类和无效等价类的代表组成，从而保证测试用例具有完整性和代表性。另外，由于大量的系统测试错误是发生在输入或输出范围的边界上，而不是发生在输入输出范围的内部。因此针对各种边界情况设计测试用例的边界值参数，可以使测试更加严谨。

此外，作为一种优选的实施方式，目标测试用例的内容还包括预期结果；

相应的，该方法进一步包括：

将测试结果与预期结果进行比对，并将比对结果记录至测试报告。

可以理解的是，目标测试用例的内容还包括预期结果能够表示该测试用例在正常执行的情况下的结果情况，通常与测试结果进行比对，如果一致则说明测试结果不存在问题，不一致则说明该系统在测试用例规定的流程执行情况下存在bug，因此可以将测试结果与预期结果的比对情况记录至测试报告，进而用户可以以测试报告记载的内容为依据，进行有针对性的优化及修改。

此外，作为一种优选的实施方式，待测系统具体为云计算系统。

由于云计算系统由分布式计算系统、并行计算系统、效用计算系统、网络存储系统、虚拟化系统、负载均衡系统、热备份冗余系统等传统计算机和网络系统相融合的产物，因此具有庞大复杂的业务操作流程关系，通过本方法能够灵活且覆盖面广的进行可用性测试，提高了整体的测试准确性。

实施例三

在上文中对于一种系统测试方法的实施例进行了详细的描述，本发明还提供一种系统测试装置，由于装置部分的实施例与方法部分的实施例相互对应，因此装置部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。

图2为本发明实施例提供的一种系统测试装置结构图。如图2所示，本发明实施例提供的一种系统测试装置，包括：

操作划分模块10，用于依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤。

用例设置模块11，用于根据测试需求设定目标测试用例。

脚本生成模块12，用于获取执行测试逻辑所需的目标原子操作步骤，以查得与目标原子操作步骤对应的目标测试代码，并依照测试逻辑，对目标测试代码进行组合以生成测试脚本。

结果获取模块13，用于将测试参数作为测试脚本的测试输入数据，并执行测试脚本以得到测试结果。

本发明所提供的系统测试装置，将待测系统完整的一系列操作流程划分为原子操作步骤，实现了对操作内容的细化，并且每一个原子操作步骤都有对应的测试代码对其可用性进行测试，进而能够根据测试用例所记载的目标原子操作步骤，并找到测试各目标原子操作步骤的测试代码，进而根据测试逻辑将测试代码进行组合成为测试脚本，并将测试参数作为测试脚本的测试输入数据，执行测试脚本以得到测试结果。由于本装置能够将完整的操作流程划分为操作单元的形式，即原子操作步骤，并且对于原子操作步骤均有对应的测试代码，实现了对于测试的内容的相对细化。可见本装置不拘泥于编写固定的测试脚本以进行测试，而是可以根据实际的测试需求灵活的对测试内容的进行组合，以生成测试脚本，因此能够根据实际的测试情况，通过设定测试用例而有针对性的生成测试脚本，因此测试内容相对更加全面，并且不需要测试人员频繁修改测试脚本以确保其可用性，保证了整体效率。

在实施例三的基础上，该装置还包括：

报告记录模块，用于将测试结果与预期结果进行比对，并将比对结果记录至测试报告。

实施例四

本发明还提供一种系统测试装置，包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序时实现如上述的系统测试方法的步骤。

本发明所提供的系统测试装置，将待测系统完整的一系列操作流程划分为原子操作步骤，实现了对操作内容的细化，并且每一个原子操作步骤都有对应的测试代码对其可用性进行测试，进而能够根据测试用例所记载的目标原子操作步骤，并找到测试各目标原子操作步骤的测试代码，进而根据测试逻辑将测试代码进行组合成为测试脚本，并将测试参数作为测试脚本的测试输入数据，执行测试脚本以得到测试结果。由于本装置能够将完整的操作流程划分为操作单元的形式，即原子操作步骤，并且对于原子操作步骤均有对应的测试代码，实现了对于测试的内容的相对细化。可见本装置不拘泥于编写固定的测试脚本以进行测试，而是可以根据实际的测试需求灵活的对测试内容的进行组合，以生成测试脚本，因此能够根据实际的测试情况，通过设定测试用例而有针对性的生成测试脚本，因此测试内容相对更加全面，并且不需要测试人员频繁修改测试脚本以确保其可用性，保证了整体效率。

本发明还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述的系统测试方法的步骤。

本发明所提供的系统测试的计算机可读存储介质，将待测系统完整的一系列操作流程划分为原子操作步骤，实现了对操作内容的细化，并且每一个原子操作步骤都有对应的测试代码对其可用性进行测试，进而能够根据测试用例所记载的目标原子操作步骤，并找到测试各目标原子操作步骤的测试代码，进而根据测试逻辑将测试代码进行组合成为测试脚本，并将测试参数作为测试脚本的测试输入数据，执行测试脚本以得到测试结果。由于本计算机可读存储介质能够将完整的操作流程划分为操作单元的形式，即原子操作步骤，并且对于原子操作步骤均有对应的测试代码，实现了对于测试的内容的相对细化。可见本计算机可读存储介质不拘泥于编写固定的测试脚本以进行测试，而是可以根据实际的测试需求灵活的对测试内容的进行组合，以生成测试脚本，因此能够根据实际的测试情况，通过设定测试用例而有针对性的生成测试脚本，因此测试内容相对更加全面，并且不需要测试人员频繁修改测试脚本以确保其可用性，保证了整体效率。

以上对本发明所提供的一种系统测试方法、装置及介质进行了详细介绍。说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

Claims (10)

1.一种系统测试方法，其特征在于，包括：

依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤；其中，各所述原子操作步骤均有对应测试代码，N为大于1的整数；

根据测试需求设定目标测试用例；其中，所述目标测试用例的内容至少包括测试逻辑以及测试参数；

获取执行所述测试逻辑所需的目标原子操作步骤，以查得与所述目标原子操作步骤对应的目标测试代码，并依照所述测试逻辑，对所述目标测试代码进行组合以生成测试脚本；

将所述测试参数作为所述测试脚本的测试输入数据，并执行所述测试脚本以得到测试结果。

2.根据权利要求1所述的方法，其特征在于，所述目标测试用例具体由不同所述业务操作流程的测试用例依照预设的组合规则组合而成。

3.根据权利要求2所述的方法，其特征在于，所述组合规则包括：

将存在逻辑关系的各所述测试用例进行组合，以及将不存在逻辑关系的各所述测试用例进行组合。

4.根据权利要求1所述的方法，其特征在于，所述测试参数具体包括等价类参数以及边界值参数。

5.根据权利要求1所述的方法，其特征在于，所述目标测试用例的内容还包括预期结果；

相应的，该方法进一步包括：

将所述测试结果与所述预期结果进行比对，并将比对结果记录至测试报告。

6.根据权利要求1-5任意一项所述的方法，其特征在于，所述待测系统具体为云计算系统。

7.一种系统测试装置，其特征在于，包括：

操作划分模块，用于依照预设标准将待测系统的业务操作流程划分为N个原子操作步骤；

用例设置模块，用于根据测试需求设定目标测试用例；

脚本生成模块，用于获取执行所述测试逻辑所需的目标原子操作步骤，以查得与所述目标原子操作步骤对应的目标测试代码，并依照所述测试逻辑，对所述目标测试代码进行组合以生成测试脚本；

结果获取模块，用于将所述测试参数作为所述测试脚本的测试输入数据，并执行所述测试脚本以得到测试结果。

8.根据权利要求7所述的装置，其特征在于，该装置进一步包括：

报告记录模块，用于将所述测试结果与所述预期结果进行比对，并将比对结果记录至测试报告。

9.一种系统测试装置，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至6任一项所述的系统测试方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的系统测试方法的步骤。