CN111159003A

CN111159003A - 一种批处理测试方法及装置

Info

Publication number: CN111159003A
Application number: CN201811317986.XA
Authority: CN
Inventors: 杨冬森
Original assignee: Mashang Xiaofei Finance Co Ltd
Current assignee: Mashang Xiaofei Finance Co Ltd; Mashang Consumer Finance Co Ltd
Priority date: 2018-11-07
Filing date: 2018-11-07
Publication date: 2020-05-15
Anticipated expiration: 2038-11-07
Also published as: CN111159003B

Abstract

本发明提供一种批处理测试方法及装置，该方法包括：获取待测试文件；将所述待测试文件上传至待测试服务器对应的FTP服务器；根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；输出批处理的处理结果。通过本发明提供的批处理测试方法，可以实现自动对待测试服务器进行批处理测试，节省了人工操作，并提高了批处理测试的效率。

Description

一种批处理测试方法及装置

技术领域

本发明涉及计算机技术领域，尤其涉及一种批处理测试方法及装置。

背景技术

随着计算机技术的快速发展，所需处理的数据呈几何式增长，为了提高数据处理效率，通常会对一些数据进行跑批处理。其中，跑批处理也可以称为批量处理，是现有计算机系统常用的一种数据处理手段，其原理是将相同类型的数据进行集中处理。以消费金融行业的业务数据为例，催收系统需要将上游系统所推送的客户数据进行跑批，来完成客户逾期信息的创建及保存。

目前，对业务系统的跑批测试主要是借助手动操作完成的，例如，通过用户手动压缩待测试文件，手动将压缩后的待测试文件上传至FTP服务器，并手动更改业务系统的服务器的业务开关之后，操作前端按钮进行跑批，操作较为繁琐。特别是对于那些发布周期短、测试场景复杂的业务系统，会产生大量重复操作，严重影响测试效率。

可见，现有技术中存在业务系统的跑批测试操作较为繁琐，效率较低的问题。

发明内容

本发明实施例提供一种批处理测试方法及装置，以解决业务系统的跑批测试操作较为繁琐，效率较低的问题。

为了解决上述技术问题，本发明是这样实现的：

第一方面，本发明实施例提供了一种批处理测试方法。该方法包括：

获取待测试文件；

将所述待测试文件上传至待测试服务器对应的FTP服务器；

根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；

输出批处理的处理结果。

第二方面，本发明实施例还提供一种批处理测试装置。该批处理测试装置包括：

第一获取模块，用于获取待测试文件；

上传模块，用于将所述待测试文件上传至待测试服务器对应的FTP服务器；

批处理模块，用于根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；

输出模块，用于输出批处理的处理结果。

第三方面，本发明实施例还提供一种批处理测试装置，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述的批处理测试方法的步骤。

第四方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述的批处理测试方法的步骤。

本发明实施例中，通过获取待测试文件；将所述待测试文件上传至待测试服务器对应的FTP服务器；根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；输出批处理的处理结果，可以实现自动对待测试服务器进行批处理测试，节省了人工操作，并提高了批处理测试的效率。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的批处理测试方法的流程图；

图2是本发明又一实施例提供的批处理测试方法的流程图；

图3是本发明实施例提供的批处理测试装置的结构图；

图4是本发明又一实施例提供的批处理测试装置的结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供一种批处理测试方法，可以应用于电子设备，其中，该电子设备可以是终端设备，也可以是服务器。参见图1，图1是本发明实施例提供的批处理测试方法的流程图，如图1所示，包括以下步骤：

步骤101、获取待测试文件。

本发明实施例中，待测试文件的数量可以根据实际需求进行设置，例如，10000、20000、50000等。上述待测试文件可以包括模拟实际业务所生成的测试数据。例如，待测试文件可以包括模拟借贷业务所生成的客户信息，其中，客户信息可以包括但不限于客户姓名、联系方式、身份证信息、借贷金额、还款期限等，以跑批得到客户逾期信息。

该步骤，可以是生成待测试文件，也可以是接收用户上传的待测试文件。其中，对于生成待测试文件，例如，可以是通过调用预先设置的文件生成程序生成上述待测试文件。对于接收用户上传的待测试文件，例如，可以是基于前端页面，接收用户上传的待测试文件。

步骤102、将所述待测试文件上传至待测试服务器对应的FTP服务器。

实际应用中，一业务系统可以包括一个或是至少两个服务器，每个服务器均可以对应一个或是至少两个FTP(File Transfer Protocol，文件传输协议)服务器。上述待测试服务器可以是业务系统中任一个服务器。可选的，在业务系统包括至少两个服务器的情况下，可以预先配置当前需要测试的待测试服务器和其对应的FTP服务器，例如，可以预先配置待测试服务器的IP(Internet Protocol，网络协议)地址和其对应的FTP服务器的地址。

步骤103、根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理。

本发明实施例中，上述服务器测试环境参数可以根据实际需求进行合理配置。例如，上述服务器测试环境参数可以包括但不限于待测试服务器的接口地址、接口调用方式、系统版本、对应的FTP服务器的地址、测试业务时间、用于指示是否仅更新数据库的第一信息和用于指示是否清除相应数据库中的数据表的第二信息等中的一项或是多项。

该步骤中，可以根据上述服务器测试环境参数控制待测试服务器处于测试环境，以在所述测试环境下对所述待测试文件进行批处理。例如，所述服务器测试环境参数至少包括待测试服务器的接口地址、接口调用方式和系统版本，则可以基于所述系统版本，采用所述接口调用方式调用所述接口地址对应的接口，以从所述待测试服务器对应的FTP服务器读取所述待测试文件并进行批处理。

步骤104、输出批处理的处理结果。

该步骤中，通过输出批处理的处理结果，以供用户查看，便于用户分析被测试服务器的批处理性能。

本发明实施例提供的批处理测试方法，通过获取待测试文件；将所述待测试文件上传至待测试服务器对应的FTP服务器；根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；输出批处理的处理结果，可以实现自动对待测试服务器进行批处理测试，节省了人工操作，并提高了批处理测试的效率。

可选的，上述步骤101，也即所述获取待测试文件，可以包括：

获取初始待测试文件；

对所述初始待测试文件进行预处理，得到所述待测试文件；其中，所述预处理包括格式校正处理和压缩处理中的至少一项。

本发明实施例中，上述初始待测试文件可以是用户上传的文件，也可以是生成的文件。上述格式校正处理可以包括但不限于文件名、文件路径、文件日期和文件后缀等中的一项或是多项的校正处理。上述压缩处理可以是按照预设的批量压缩方式对待测试文件进行压缩。

实际应用中，可以先对初始待测试文件进行格式校正处理，在对格式校正处理后的初始待测试文件进行压缩处理，得到压缩处理后的初始待测试文件，也即上述的待测试文件。

本发明实施例通过对初始待测试文件进行格式校正处理，不仅可以避免因格式不匹配造成的批处理失败，以提高批处理测试的效率，还可以提高批处理测试的兼容性，以适配不同的测试环境。此外，通过对初始待测试文件进行压缩处理，可以减少节省存储空间。

可选的，所述服务器测试环境参数包括测试业务时间；

所述对所述初始待测试文件进行预处理，得到所述待测试文件，包括：

在所述初始待测试文件的时间与所述测试业务时间不一致的情况下，校正所述初始待测试文件的时间为所述测试业务时间，得到所述待测试文件。

本发明实施例中，上述测试业务时间可以是指跑批时间，例如，统计10月1日客户的逾期信息，则跑批时间即为10月1日。实际应用中，一些金融机构(例如，银行)通常会在每天的某一时间跑批统计和汇总各类报表等。

在切日跑批的场景下，初始待测试文件的时间往往与测试业务时间不一致，此时需要对初始待测试文件的时间进行修改。例如，初始待测试文件的时间为9月30日，测试业务时间为10月1日，则需要将初始待测试文件的时间调整为10月1日。上述切日跑批可以是指切至不同日期进行跑批。例如，9月30日对初始待测试文件进行跑批，跑批处理后可对初始待测试文件中的部分内容进行调整，如调整部分客户的还款信息等，切至10月1日，基于调整内容后的初始待测试文件再次进行跑批。

然而现有技术中，在切日跑批的场景下，通常是通过人工修改待测试文件的时间，操作较为繁琐且效率较低。本发明实施例可以自动校正初始待测试文件的时间为测试业务时间，不仅可以节省人工操作，还可以提高批处理测试的效率。

可选的，所述将所述待测试文件上传至待测试服务器对应的FTP服务器之前，所述方法还包括：

通过预设的配置界面，接收用户配置的待测试服务器的地址和所述待测试服务器的服务器测试环境参数。

本发明实施例中，在用户需要对不同的待测试服务器进行批处理测试的情况下，无需用户分别登录待测试服务器以进行服务器测试环境参数配置，可以通过预设的配置界面，统一配置不同的待测试服务器的服务器测试环境参数，操作较为便捷。

可选的，所述服务器测试环境参数包括服务器配置信息和业务配置信息；

所述通过预设的配置界面，接收用户配置的待测试服务器的地址和所述待测试服务器的服务器测试环境参数，包括：

通过第一配置界面接收用户配置的待测试服务器的地址和所述服务器配置信息；

通过第二配置界面接收用户配置的所述业务配置信息。

本发明实施例中，上述服务器配置信息可以包括但不限于待测试服务器的端口、接口地址、系统版本和对应的FTP服务器的地址等中的至少一项。上述业务配置信息可以包括但不限于测试业务时间、接口调用方式、用于指示是否仅更新数据库的第一信息和用于指示是否清除相应数据库中的数据表的第二信息等中的至少一项。

实际情况中，服务器配置信息往往变动频率较小，而业务配置信息往往变动频率较大，通过在不同的配置界面配置上述两类信息，可以简化配置界面，也可以提高配置服务器测试环境参数的灵活性和便捷性。

可选的，所述根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理之前，所述方法还包括：

获取所述待测试服务器的服务器测试环境参数；

对所述服务器测试环境参数进行封装；

所述根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理，包括：

根据封装后的所述服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理。

本发明实施例中，可以对服务器测试环境参数进行封装，例如，可以将服务器测试环境参数封装为类，便于调用。

以下结合示例对本发明实施例进行说明：

本发明实施例中，可以获取用户配置的系统配置文件，其中，系统配置文件可以包括待测服务器的IP地址以及待测试服务器的端口、接口地址、系统版本、所用的FTP服务器的地址(也即对应的FTP服务器的地址)等服务器配置信息；接收用户在前端页面导入的待测试文件和业务配置信息，并可以在待测试文件的时间有误的情况下，对待测试文件进行纠错处理并进行压缩，上传至待测试服务器对应的FTP服务器之后，根据所接收的前端页面所传递系统配置文件和业务配置信息进行数据分析，差异化调用各个接口，最终达到获取跑批结果，完成跑批的效果。

具体的，参见图2，本发明实施例提供的批处理测试方法包括如下步骤：

步骤201、接收用户配置的系统配置文件。

该步骤中，由于待测试服务器的数量较多，系统版本也不尽相同，同时待测试服务器之间的切换也会影响到FTP服务器及接口地址的调用，本发明实施例将服务器的配置信息统一存放入系统配置文件进行管理，从而用户可以仅在业务系统发生系统版本变更时进行统一配置即可，无需频繁变更系统配置文件。

需要说明的是，上述系统配置文件可以包括待测服务器的IP地址以及待测试服务器的端口、接口地址、系统版本、所用的FTP服务器的地址(也即对应的FTP服务器的地址)等服务器配置信息。

步骤202、接收用户上传的待测试文件和提交的业务配置信息。

该步骤中，可以在前端页面导入待测试文件，同时写入待测文件的业务配置信息，也可以称为跑批目标信息。其中，业务配置信息可以包括待测试服务器的地址、测试业务时间、接口调用方式、是否仅更新数据库，是否清除相应数据库表等信息。需要说明的是，不同于服务器配置信息，在每次批处理测试时通常都需要更改业务配置信息。

步骤203、对待测试文件进行预处理。

该步骤中，可以首先校验待测试文件的格式是否正确，校验通过后根据前端页面所传测试业务时间，与待测试文件的时间进行对比，若不符合则将待测试文件的时间修改为上述测试业务时间，完成后执行基于预设的批量压缩方式，对待测试文件进行压缩。

步骤204、将预处理后的待测试文件上传至FTP服务器。

该步骤中，可以根据系统配置文件及用户在前端页面的控件中所选内容(也即上述业务配置信息)，唯一匹配一台待测试服务器及其相对应FTP服务器，执行批量上传操作。

步骤205、对业务配置信息和系统配置文件中的服务器配置信息进行分析和封装，得到结果类。

该步骤中，可以对业务配置信息和服务器配置信息进行分析，确定用户进行测试的系统版本、FTP路径、接口地址、接口调用方式等，并封装成结果类。

步骤206、根据所述结果类，调用接口进行批处理。

该步骤中，可以根据结果类，异步启用多个执行线程，调用对应的接口来进行跑批，完成后可以输出批处理的处理结果和日志，以供用户查看和分析。

步骤207、输出批处理的处理结果。

需要说明的是，本发明实施例对上述步骤201和步骤202的执行顺序不做限定。其次，上述步骤205可以在上述步骤201和步骤202之后，以及步骤206之前的任意时间执行，并不限于在步骤204之后。

以下结合现有技术说明本发明实施例的有益效果：

首先，现有技术中，在进行切日跑批时，通常需要用户手动修改待测试文件名称，手动逐个压缩待测试文件，手动上传，手动执行多次的接口调用操作，花费时间较多，而本发明实施例中，用户只需在前端页面导入待测试文件，填写表单(该表单可以包括业务配置信息和服务器配置信息)并提交即可完成跑批操作，节省跑批时间。

其次，现有技术中，在进行业务时间更改跑批测试时，需要用户手动频繁地更改待测试文件的时间戳，重复操作较多，而本发明实施例可以自行进行待测试文件的时间戳的更改，进一步节省跑批时间。

最后，现有技术中，在切换测试系统为多租户版本进行跑批时，需要自行增加匹配租户ID和FTP路径，并手动切换至不同租户进行跑批，其操作较为繁琐和复杂，而本发明实施例可以通过上述系统配置文件和前端页面进行对应配置，即可切换至不同租户进行跑批，操作较为简单、便捷。

综上可知，本发明实施例提供的批处理测试方法，可以通过前端页面的表单发起请求，对用户提出的请求快速响应，自动纠错待测试文件，自动匹配待测服务器及待测试系统版本，可适用全部测试范围及覆盖全部冒烟测试、集成测试、验收测试阶段，易用的页面展示及系统文件配置降低测试人员的学习成本及人力成本，相比于现有的人工进行操作，更加符合测试人员的操作习惯，可以大幅减少系统切换及跑批时间，避免现有的对待测试服务器的前端页面的重复性操作及排队的情况，能够提高测试效率，减少了不必要的非测试时间，从而达到为公司节省人力成本的目的。

参见图3，图3是本发明实施例提供的批处理测试装置的结构图。如图3所示，批处理测试装置300包括：

第一获取模块301，用于获取待测试文件；

上传模块302，用于将所述待测试文件上传至待测试服务器对应的FTP服务器；

批处理模块303，用于根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；

输出模块304，用于输出批处理的处理结果。

可选的，所述第一获取模块包括：

第一获取单元，用于获取初始待测试文件；

预处理单元，用于对所述初始待测试文件进行预处理，得到所述待测试文件；其中，所述预处理包括格式校正处理和压缩处理中的至少一项。

可选的，所述服务器测试环境参数包括测试业务时间；

所述预处理单元具体用于：

可选的，所述装置还包括：

接收模块，用于所述将所述待测试文件上传至待测试服务器对应的FTP服务器之前，通过预设的配置界面，接收用户配置的待测试服务器的地址和所述待测试服务器的服务器测试环境参数。

所述接收模块具体用于：

通过第二配置界面接收用户配置的所述业务配置信息。

可选的，所述服务器配置信息包括待测试服务器的端口、接口地址、系统版本和对应的FTP服务器的地址中的至少一项；

所述业务配置信息包括测试业务时间、接口调用方式、用于指示是否仅更新数据库的第一信息和用于指示是否清除相应数据库中的数据表的第二信息中的至少一项。

可选的，所述装置还包括：

第二获取模块，用于所述根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理之前，获取所述待测试服务器的服务器测试环境参数；

封装模块，用于对所述服务器测试环境参数进行封装；

所述批处理模块具体用于：

本发明实施例提供的批处理测试装置300能够实现上述方法实施例中的各个过程，为避免重复，这里不再赘述。

本发明实施例的批处理测试装置300，通过第一获取模块301，用于获取待测试文件；上传模块302，用于将所述待测试文件上传至待测试服务器对应的FTP服务器；批处理模块303，用于根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理；输出模块304，用于输出批处理的处理结果，可以实现自动对待测试服务器进行批处理测试，节省了人工操作，并提高了批处理测试的效率。

参见图4，图4是本发明又一实施提供的批处理测试装置的结构图，如图4所示，批处理测试装置400包括：处理器401、存储器402及存储在所述存储器402上并可在所述处理器上运行的计算机程序，数据发送装置400中的各个组件通过总线接口403耦合在一起，所述计算机程序被所述处理器401执行时实现如下步骤：

获取待测试文件；

将所述待测试文件上传至待测试服务器对应的FTP服务器；

输出批处理的处理结果。

可选的，所述计算机程序被所述处理器401执行时还用于：

获取初始待测试文件；

可选的，所述服务器测试环境参数包括测试业务时间；

所述计算机程序被所述处理器401执行时还用于：

可选的，所述计算机程序被所述处理器401执行时还用于：

所述将所述待测试文件上传至待测试服务器对应的FTP服务器之前，通过预设的配置界面，接收用户配置的待测试服务器的地址和所述待测试服务器的服务器测试环境参数。

所述计算机程序被所述处理器401执行时还用于：

通过第二配置界面接收用户配置的所述业务配置信息。

可选的，所述计算机程序被所述处理器401执行时还用于：

所述根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理之前，获取所述待测试服务器的服务器测试环境参数；

对所述服务器测试环境参数进行封装；

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述批处理测试方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims

1.一种批处理测试方法，其特征在于，包括：

获取待测试文件；

将所述待测试文件上传至待测试服务器对应的FTP服务器；

输出批处理的处理结果。

2.根据权利要求1所述的方法，其特征在于，所述获取待测试文件，包括：

获取初始待测试文件；

3.根据权利要求2所述的方法，其特征在于，所述服务器测试环境参数包括测试业务时间；

4.根据权利要求1所述的方法，其特征在于，所述将所述待测试文件上传至待测试服务器对应的FTP服务器之前，所述方法还包括：

5.根据权利要求4所述的方法，其特征在于，所述服务器测试环境参数包括服务器配置信息和业务配置信息；

通过第二配置界面接收用户配置的所述业务配置信息。

6.根据权利要求5所述的方法，其特征在于，所述服务器配置信息包括待测试服务器的端口、接口地址、系统版本和对应的FTP服务器的地址中的至少一项；

7.根据权利要求1所述的方法，其特征在于，所述根据所述待测试服务器的服务器测试环境参数，控制所述待测试服务器对所述待测试文件进行批处理之前，所述方法还包括：

获取所述待测试服务器的服务器测试环境参数；

对所述服务器测试环境参数进行封装；

8.一种批处理测试装置，其特征在于，包括：

第一获取模块，用于获取待测试文件；

输出模块，用于输出批处理的处理结果。

9.一种批处理测试装置，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的批处理测试方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的批处理测试方法的步骤。