CN117093473A - 用于大数据测试的方法和系统 - Google Patents

Abstract

本公开涉及用于大数据测试的方法和系统。提供了一种用于大数据测试的方法，包括：配置测试任务，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；执行所述测试任务，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及获得所述测试任务的执行结果并存储所述执行结果。

Description

用于大数据测试的方法和系统

技术领域

本公开涉及测试领域，更具体地，涉及一种用于大数据测试的方法、设备、计算机系统和计算机可读存储介质。

背景技术

目前，一般使用商业化软件来手动地执行大数据测试。这种测试软件往往需要按年度付费，成本较高。此外，基于商业化软件的测试无法完全符合特定公司的流程和规范，并且扩展性低。在利用商业化软件来进行大数据测试的情况下，需要测试人员编写Python脚本或者Java脚本，这就要求测试人员具备一定的编程知识。由于大数据测试的数据量大，人工编写脚本的测试效率低。

此外，与大数据测试相关的数据源类型多样，测试场景复杂，因此利用现有技术进行大数据测试的过程较为复杂，需要大量的人力成本。

目前，测试基于单人工作模式，在用户之间缺少协作，不同的用户单独进行测试，从而彼此之间不了解测试内容和测试进度。此外，因为使用单人工作模式，用户需要各自定义自己的各个测试实例以及测试实例所包含的测试步骤或操作，从而测试实例和测试操作在用户之间无法共享使用。

此外，目前测试结果被存储在测试者的本地，这导致安全性不足，维护成本高。

发明内容

本公开旨在提供用于实现一种用于大数据测试的方法、设备、计算机系统和计算机可读存储介质。

根据本公开的一些实施例，提供了一种用于大数据测试的方法，包括：配置测试任务，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；执行所述测试任务，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及获得所述测试任务的执行结果并存储所述执行结果。

根据本公开的一些实施例，测试操作是由作为测试用户的第一用户创建的，或者测试操作是由与第一用户不同的第二用户创建的并且被第一用户导入到相应测试实例中。

根据本公开的一些实施例，在测试操作是SQL类型的测试操作时，配置测试任务包括由用户输入一个或多个SQL语句来规定所述SQL类型的测试操作的内容。

根据本公开的一些实施例，该方法还包括在执行所述测试任务时将用户输入的所述一个或多个SQL语句自动转换为符合作为测试目标的数据源的SQL语法。

根据本公开的一些实施例，在测试操作是API类型的测试操作时，配置测试任务包括由用户输入包含API的脚本来规定所述API类型的测试操作的内容。

根据本公开的一些实施例，该方法还包括提取所述一个或多个测试操作中的第一API类型或SQL类型测试操作所涉及的变量的值以提供给在后执行的第二API类型或SQL类型测试操作使用。

根据本公开的一些实施例，在测试操作是表数据比较类型的测试操作时，配置测试任务包括：由用户选择要比较的第一表和第二表，其中第一表和第二表属于相同的数据源或者不同的数据源；由用户对第一表的字段进行处理；以及由用户选择表数据比较的标准。

根据本公开的一些实施例，对第一表的字段进行处理包括以下的一者或多者：修改第一表的一个或多个字段的名称；转换第一表的一个或多个字段的类型；对第一表的一个或多个字段进行截取；以及选择忽略第一表的一个或多个字段。

根据本公开的一些实施例，所述表数据比较的标准包括以下的一者或多者：数据对比、枚举字段、抽取数据、主键重复、以及填充率。

根据本公开的一些实施例，在测试操作是表结构比较类型的测试操作时，配置测试任务包括：由用户选择要比较的数据源中的第一表；以及由用户输入针对第一表要核对的至少一个字段的字段名称和字段类型。

根据本公开的一些实施例，在测试操作是文件对比类型的测试操作时，配置测试任务包括：由用户选择要比较的文件，其中基于所述文件能够形成第一表；由用户选择要比较的数据源中的第二表；由用户对第二表的字段进行处理；以及由用户选择数据比较的标准。

根据本公开的一些实施例，该方法还包括提供封装函数调用，所述封装函数能够在所述包含API的脚本中被调用。

根据本公开的一些实施例，该方法还包括响应于用户的输入而显示与大数据测试相关的统计数据，所述统计数据包括以下的一者或多者：已配置测试任务的总数、当前运行任务数、任务成功率、实例总数、用户总数、数据源总数、各数据源被访问次数。

根据本公开的一些实施例，该方法还包括由用户配置用于对所述执行结果应用的断言。

根据本公开一些实施例，提供了一种计算机系统，包括：一个或多个处理器，和与所述一个或多个处理器耦接的存储器，所述存储器存储计算机可读程序指令，所述指令在被所述一个或多个处理器执行时执行如上所述的方法。

根据本公开一些实施例，提供了一种计算机可读存储介质，其上存储计算机可读程序指令，所述指令在被所述处理器执行时执行如上所述的方法。

根据本公开一些实施例，提供了一种用于大数据测试的设备，包括用于实现如上所述的方法的步骤的设备。

附图说明

通过结合附图对本公开示例性实施方式进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施方式中，相同的参考标号通常代表相同部件。

图1示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的框图。

图2示出了根据本公开的一个实施例的用于大数据测试的方法的流程图。

图3示出了根据本公开的一个实施例的用于配置SQL类型的测试操作的示例性用户界面。

图4A和图4B示出了根据本公开的一个实施例的用于设置在表数据比较前进行的字段处理的示例性用户界面。

图5A示出了根据本公开的一个实施例的用于在表结构比较测试操作期间核对数据源中的表的结构的由用户输入的字段信息的例子。

图5B示出根据本公开的一个实施例的表结构比较测试操作的执行结果的例子。

图6示出了根据本公开的一个实施例的显示基于大数据测试的统计数据的例子。

具体实施方式

下面将参照附图更详细地描述本公开的优选实施方式。虽然附图中显示了本公开的优选实施方式，然而应该理解，可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。

图1示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的框图。图1显示的计算机系统/服务器12仅仅是示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图1所示，计算机系统/服务器12以通用计算设备的形式表现。计算机系统/服务器12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。

系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。计算机系统/服务器12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质。尽管图1中未示出，还可以提供磁盘驱动器以及光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

计算机系统/服务器12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该计算机系统/服务器12交互的设备通信，和/或与使得该计算机系统/服务器12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，计算机系统/服务器12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与计算机系统/服务器12的其它模块通信。应当明白，尽管图中未示出，可以结合计算机系统/服务器12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

现在参看图2，图2示出了根据本发明的一个实施例的用于大数据测试的方法200的流程图。该方法200例如由图1所述的计算机系统/服务器12执行。该方法200包括测试任务配置步骤210、测试任务执行步骤220、以及执行结果获得步骤230。

方法200开始于测试任务配置步骤210。在测试任务配置步骤210中，由用户配置测试任务。一个测试任务可以包括一个或多个测试实例。当所述测试任务被执行时，它所包括的一个或多个测试实例将被顺序地执行。此外，所述一个或多个测试实例中的每一个可以包括可配置的一个或多个测试操作(也可以成为测试步骤)。例如，一个测试实例可以包括测试操作A、B和C。用户可以灵活地配置每个测试操作A、B或C具体执行什么动作。当测试实例被执行时，它所包括的一个或多个测试操作将被顺序地执行。根据本发明的一个实施例，方法200例如可以由服务器执行，该服务器可以是云平台上的虚拟机。根据本发明的另一个实施例，所述服务器也可以是独立的实体机器。用户可以使用客户端例如通过web用户界面登录所述服务器，从而多个用户可以同时或单独地登录到服务器进行大数据测试。

本发明的发明人提出，构成一个测试实例的可配置的测试操作可以包括多种类型。根据本公开的一个实施例，所述一个或多个测试操作中的测试操作的类型可以选自包括以下类型的组：SQL、API(应用编程接口)、表数据比较、表结构比较、以及文件对比。

通过组合不同类型的测试操作来形成测试实例，可以支持多样的灵活的大数据测试，提高测试场景的覆盖率。并且对于复杂多样的测试实例，用户仅需简单的配置即可实现。

根据本公开的一个实施例，测试操作可以是由作为测试用户的第一用户创建的。根据本公开的另一个实施例，测试操作可以是由与第一用户不同的第二用户创建的并且被第一用户导入到相应测试实例中。也就是说，由其他用户先前创建的测试操作，可以被当前用户使用以结合到当前用户正在创建的测试实例中从而成为该测试实例的一部分。此外，当前用户也可以重复多次使用自己配置的测试操作，从而提供了便利性。这提高了所配置的测试操作的重用性，避免了重复的工作。

根据本公开的一个实施例，在测试操作是SQL类型的测试操作时，配置测试任务可以包括由用户输入一个或多个SQL语句来规定所述SQL类型的测试操作的内容。例如，用户可以在用于配置测试操作的用户界面中，输入测试操作的名称，以及测试所针对的数据源的信息。数据源的信息例如可以包括环境名称、数据源名称、数据库名称等。在一个示例中，用户可以在用户界面的SQL输入栏中输入SQL语句。图3示出了根据本发明的一个实施例的用于配置SQL类型的测试操作的示例性用户界面。在图3的示例中，Step_SQL_01是用户输入的操作名称；延时执行时间表示开始执行当前测试操作前等待的秒数；Dev是用户选择的环境名称，ci-hive-dev是用户选择的数据源名称，dwc是用户选择的数据库名称；并且用户输入了SQL语句Select*from ads_rpt_afs_uc_home_tr_t。

根据本公开的一个实施例，在一个测试操作中，用户可以输入多个SQL语句，这些语句在测试任务执行期间将被顺序地执行。根据本公开的一个实施例，方法200还可以包括在执行所述测试任务时将用户输入的一个或多个SQL语句自动转换为符合作为测试目标的数据源的SQL语法。本领域的技术人员知晓，对于不同的数据源，SQL的语法可能存在差异。例如，hive数据源在对表重命名时如果使用“as t”则会报错，根据本发明的一个实施例，在针对hive数据源进行测试时，将自动去掉SQL语句中的“as t”，从而避免了执行错误，实现了自动容错。通过这样做，提高了用户的便利性，因为用户不必了解所有数据库的SQL语法差异就能针对多种类型的数据源执行测试。

根据本公开的一个实施例，在测试操作是API类型的测试操作时，配置测试任务可以包括由用户输入包含API的脚本来规定所述API类型的测试操作的内容。在一个实施例中，例如用户可以在用于配置API类型的测试操作的用户界面中输入以下脚本来执行API调用：http://xmf.abc.com/dashboard/api/getTestCount Info？startDate＝#(pw)。这里，getTestCoundInfor是调用的API，pw是一个变量。

根据本公开的一个实施例，API类型的测试操作可以支持设置前置操作，例如用于对变量进行预先赋值。例如，在设置前置操作pw＝2023-02-28从而未pw赋值以便于进行API调用。根据本公开的一个实施例，方法200还可以包括提供封装函数调用，所述封装函数能够在所述包含API的脚本中被调用。例如，可以由用户手动地在前置操作中设置pw＝global.base64(2023-02-28)，其中global.base64()是一个用于进行加密的内置函数，其能够在本发明的系统中被直接调用。此外，SQL类型的测试操作也可以支持设置前置操作以及内置函数直接调用。

根据本公开的一个实施例，方法200还可以包括提取所述一个或多个测试操作中的第一API类型或SQL类型测试操作所涉及的变量的值以提供给在后执行的第二API类型或SQL类型测试操作使用。容易理解的是，一个测试实例可以包括多个测试操作，在先的测试操作的变量的值可以被提取以提供给在后的测试操作使用。例如，对于API类型的测试操作，可以通过Jsonpath来提取变量的值。对于SQL类型的测试操作，可以通过设置字段名称以及字段值的顺序号来提取查询结果集中的值。

根据本公开的一个实施例，方法200还可以包括由用户配置用于对执行结果应用的断言。在一个例子中，当测试操作是API类型的测试操作时，可以设置例如断言Assert(code＝200)来对执行结果进行判断。在另一个例子中，当测试操作是SQL类型的测试操作时，可以设置例如断言“字段register_dealer_no不等于NULL”来对执行结果进行判断。通过这样做，提高了用户的便利性。

根据本公开的一个实施例，在测试操作是表数据比较类型的测试操作时，配置测试任务可以包括：由用户选择要比较的第一表和第二表，其中第一表和第二表属于相同的数据源或者不同的数据源；由用户对第一表的字段进行处理；以及由用户选择表数据比较的标准。

基于大数据测试的特点，由于数据通常以表的形式进行组织，所以经常需要对两个表的数据进行比较。在配置表数据比较类型的测试操作时，用户可以选择作为比较对象的两个表，这两个表可以在同一数据源中或者来自不同的数据源。根据本公开的一个实施例，对第一表的字段进行处理包括以下的一者或多者：修改第一表的一个或多个字段的名称；转换第一表的一个或多个字段的类型；对第一表的一个或多个字段进行截取；以及选择忽略第一表的一个或多个字段。对第一表的字段进行处理这一步骤是可选的，也可以跳过这一步骤而直接由用户选择表数据比较的标准。图4A和图4B示出了根据本公开的一个实施例的用于设置在表数据比较前进行的字段处理的示例性用户界面。

如图4A所示，在配置表数据比较类型的测试操作时，用户可以通过复选框来选择“字段转换”、“类型转换”、“截取”中的一者或多者。也可以都不选择。字段转换用于把选择的第一表的字段的名称转换为与第二表的对应字段的名称相同以供比较。例如，在如图4A所示的设置中，字段“both_contact”被转换成“arrival_status”。类型转换用于把选择的第一表的字段的类型转换为与第二表的对应字段的类型相同以供比较。在图4A的例子中，例如可以将选择的字段的类型转换为时间戳(timestamp)、日期(date)、整数(int)或变量(var)类型。例如，在如图4A所示的设置中，字段“bsi_contract_end_date”被转换成时间戳类型。截取用于仅截取所选择的第一表的字段的一部分以供比较。例如，在如图4A所示的设置中，字段“bsi_contract_code”的长度被转换，具体地它被截取保留第0-3位的字符串。

如图4B所示，可以选择要忽略第一表的一个或多个字段从而在表数据比较时不予考虑。在如图4B所示的设置中，例如，字段“both_contact”和“after_sales_contact”被选择忽略。

根据本公开的一个实施例，所述表数据比较的标准包括以下的一者或多者：数据对比、枚举字段、抽取数据、主键重复、以及填充率。

在选择“数据对比”标准的情况下，对两个表的数据量(例如，记录的数目)进行对比，如果数据量一致则对比成功，否则表示对比失败。对比结果可以包括执行时间和完成时间，并且可以被导出。

在选择“枚举字段”标准的情况下，用户需要选择特定的一个或多个字段进行枚举。对于所选择的字段，获得字段的枚举值以及枚举的每个值的对应数量，并且对数量进行对比，如果数量一致则对比成功，否则表示对比失败。例如，对于字段“car_type”，具有以下枚举值及其对应数量：

值	数量
		B51	7
D36	19
		K5	8

在一个实施例中，可以分别对比两个表的“car_type”字段的对应枚举值的数量；在另一个实施例中，也可以对比两个表的“car_type”字段的各个枚举值的数量之和。

在选择“随机抽取”标准的情况下，对两个表中的数据进行随机抽取。所述抽取包括抽取对应的可比较的行，例如，两个表的ID字段等于同一随机数的行。接着，对随机抽取的行按字段进行对比，所述对比包括对数据量和字段一致性的对比，如果完全一致则对比成功，否则表示对比失败。

在选择“主键重复”标准的情况下，可以对于第一表或第二表或者两者检查主键是否有重复。用户可以指定要检查的作为主键的字段。如果存在主键重复，则表示对比失败。

在选择“填充率”标准的情况下，可以对两个表中的指定字段中的NULL值或空字符串或者自定义的验证值进行填充率计算(填充率表示这些值在该字段的所有值中的比率)，如果填充率的差异大于预定阈值，则对比失败，否则表示对比成功。

上述的作为示例的多个表数据比较标准中的两个或更多个可以被用户同时选择。

根据本公开的一个实施例，在测试操作是表结构比较类型的测试操作时，配置测试任务可以包括：由用户选择要比较的数据源中的第一表；以及由用户输入针对第一表要核对的至少一个字段的字段名称和字段类型。在这个实施例中比较的不是表数据而是表结构，用于判断第一表是否包含一个或多个字段，这一个或多个字段具有用户输入的字段名称和字段类型。在另一个实施例中，还可以进一步判断这一个或多个字段是否符合用户输入的字段描述。例如，当选择了数据库“ads_cdh”中的表“ads_cdh_pii_mapping_t”作为第一表，并且输入图5A所示的5个字段信息进行对比时，获得如图5B所示的表结构对比结果。

根据本公开的一个实施例，在测试操作是文件对比类型的测试操作时，配置测试任务可以包括：由用户选择要比较的文件，其中基于所述文件能够形成第一表；由用户选择要比较的数据源中的第二表；由用户对第二表的字段进行处理；以及由用户选择数据比较的标准。在这个实施例中，由用户选择一个文件(例如，excel文件或其他表单文件)，通过该文件形成第一表(例如通过合并该文件中的多个表单或者选择其中的一个表单)。然而，由用户选择来自数据源的第二表。然后，与表数据比较类似，用户可以对第二表的字段进行可选的处理并且选择数据比较标准来比较第一表和第二表。

根据本公开的另一个实施例，用户还可以选择来自数据源的第三表，用于将第一表与第二表和第三表同时进行比较。

现在返回参照图2，在测试任务执行步骤220中，执行所述测试任务。根据本发明的一个实施例，执行所述测试任务可以包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作。由于本发明聚焦于大数据测试，一个测试任务可以包括多个测试实例，每个测试实例进而可以包括多个测试操作，并且所述多个测试操作可以为不同类型的测试操作。

根据本发明的一个实施例，执行所述测试任务可以包括以下的一者：在用户设置的预定时间开始执行所述测试任务。通过在预定时间开始执行测试任务，例如可以实现每日、每周、或每月的数据巡检，从而减少人员依赖。例如，可以在每日夜间自动进行测试，从而利用服务器的低谷使用时间来降低测试成本。

现在返回参照图2，在执行结果获得步骤230中，获得所述测试任务的执行结果并存储所述执行结果。该测试执行结果例如被存储在服务器中。通过使测试执行结果全部持久化，使得测试的结果能够被保存，这可以为数据统计、测试管理等提供基础原始数据。

根据本公开的一个实施例，方法200还可以包括响应于所述测试任务的执行完成，自动发送测试报告。在一个例子中，当测试任务执行完成时，可以向预先指定的一个或多个电子邮件地址发送测试报告。测试报告例如可以包括测试成功的任务的实例以及测试失败的实例的数量。

根据本发明的一个实施例，方法200还可以包括响应于用户的输入而显示与大数据测试相关的统计数据，所述统计数据包括以下的一者或多者：已配置测试任务的总数、当前运行任务数、任务成功率、实例总数、用户总数、数据源总数、各数据源被访问次数。图6示出了根据本发明的一个实施例的显示基于大数据测试的统计数据的例子。根据本发明的系统可以进行各种数据统计。例如，图6的例子示出了统计的已配置测试任务的总数、当前运行任务数、任务成功率、实例总数、用户总数、数据源总数。

本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。

根据本发明的一个实施例，提供了一种计算机系统，该计算机系统包括一个或多个处理器和与所述一个或多个处理器耦接的存储器。所述存储器存储计算机可读程序指令，所述指令在被所述一个或多个处理器执行时执行：配置测试任务，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；执行所述测试任务，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及获得所述测试任务的执行结果并存储所述执行结果。

根据本发明的另一个实施例，提供了一种计算机可读存储介质，其上存储计算机可读程序指令，所述指令在被处理器执行时执行：配置测试任务，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；执行所述测试任务，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及获得所述测试任务的执行结果并存储所述执行结果。

根据本发明的另一个实施例，提供了一种用于大数据测试的设备，包括：用于配置测试任务的装置，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；用于执行所述测试任务的装置，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及用于获得所述测试任务的执行结果并存储所述执行结果的装置。

计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。

这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。

用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本发明的各个方面。

这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。

这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。

也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。

附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (17)

1.一种用于大数据测试的方法，包括：

配置测试任务，其中所述测试任务包括一个或多个测试实例，所述一个或多个测试实例中的每一个包括可配置的一个或多个测试操作，并且所述一个或多个测试操作中的测试操作的类型选自包括SQL、API、表数据比较、表结构比较、文件对比的组；

执行所述测试任务，包括顺序地执行所述一个或多个测试实例中的每个测试实例所包括的一个或多个测试操作；以及

获得所述测试任务的执行结果并存储所述执行结果。

2.根据权利要求1所述的方法，其中，测试操作是由作为测试用户的第一用户创建的，或者测试操作是由与第一用户不同的第二用户创建的并且被第一用户导入到相应测试实例中。

3.根据权利要求1所述的方法，其中在测试操作是SQL类型的测试操作时，配置测试任务包括由用户输入一个或多个SQL语句来规定所述SQL类型的测试操作的内容。

4.根据权利要求3所述的方法，还包括在执行所述测试任务时将用户输入的所述一个或多个SQL语句自动转换为符合作为测试目标的数据源的SQL语法。

5.根据权利要求1所述的方法，其中在测试操作是API类型的测试操作时，配置测试任务包括由用户输入包含API的脚本来规定所述API类型的测试操作的内容。

6.根据权利要求3或5所述的方法，还包括提取所述一个或多个测试操作中的第一API类型或SQL类型测试操作所涉及的变量的值以提供给在后执行的第二API类型或SQL类型测试操作使用。

7.根据权利要求1所述的方法，其中在测试操作是表数据比较类型的测试操作时，配置测试任务包括：

由用户选择要比较的第一表和第二表，其中第一表和第二表属于相同的数据源或者不同的数据源；

由用户对第一表的字段进行处理；以及

由用户选择表数据比较的标准。

8.根据权利要求7所述的方法，其中对第一表的字段进行处理包括以下的一者或多者：

修改第一表的一个或多个字段的名称；

转换第一表的一个或多个字段的类型；

对第一表的一个或多个字段进行截取；以及

选择忽略第一表的一个或多个字段。

9.根据权利要求7所述的方法，其中所述表数据比较的标准包括以下的一者或多者：数据对比、枚举字段、抽取数据、主键重复、以及填充率。

10.根据权利要求1所述的方法，其中在测试操作是表结构比较类型的测试操作时，配置测试任务包括：

由用户选择要比较的数据源中的第一表；以及

由用户输入针对第一表要核对的至少一个字段的字段名称和字段类型。

11.根据权利要求1所述的方法，其中在测试操作是文件对比类型的测试操作时，配置测试任务包括：

由用户选择要比较的文件，其中基于所述文件能够形成第一表；

由用户选择要比较的数据源中的第二表；

由用户对第二表的字段进行处理；以及

由用户选择数据比较的标准。

12.根据权利要求5所述的方法，还包括提供封装函数调用，所述封装函数能够在所述包含API的脚本中被调用。

13.根据权利要求1所述的方法，还包括响应于用户的输入而显示与大数据测试相关的统计数据，所述统计数据包括以下的一者或多者：

已配置测试任务的总数、当前运行任务数、任务成功率、实例总数、用户总数、数据源总数、以及各数据源被访问次数。

14.根据权利要求1所述的方法，还包括由用户配置用于对所述执行结果应用的断言。

15.一种计算机系统，包括：

一个或多个处理器；和

与所述一个或多个处理器耦接的存储器，所述存储器存储计算机可读程序指令，所述指令在被所述一个或多个处理器执行时执行如权利要求1-14中任一项所述的方法。

16.一种计算机可读存储介质，其上存储计算机可读程序指令，所述指令在被处理器执行时执行如权利要求1-14中任一项所述的方法。

17.一种用于大数据测试的设备，包括用于实现如权利要求1-14中任一项所述的方法的步骤的装置。