CN114840406A - 基于线上流量脚本生成的多环境监控测试方法及其系统 - Google Patents

Abstract

本发明提供了一种基于线上流量脚本生成的多环境监控测试方法，所述测试方法包括如下步骤：步骤S1、获取线上流量即根据线上外部调用该项目接口返回的数据，查看项目的接口数据，获取线上调用的接口数据；步骤S2、线上流量数据分析即将线上的接口数据进行分析；步骤S3、验证脚本生成即按照所述线上流量数据分析的接口框架，进行脚本数据填充；步骤S4、同步脚本即将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；步骤S5、域名配置即针对所述同步脚本所要监控的线上环境；步骤S6、执行测试即根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间；以此来提高测试效率。

Description

基于线上流量脚本生成的多环境监控测试方法及其系统

技术领域

本发明涉及计算机通讯技术领域，特别是基于线上流量脚本生成的多环境监控测试方法及其系统。

背景技术

现有的社会离不开万千软件。软件的应用渗透到各行各业，在家居、医疗健康、教育、金融、服务业和旅游业等与生活息息相关的领域都存在各式各样的应用软件，因为有了这些各式各样的应用软件，使得服务范围、服务方式到服务的质量等方面都有了极大的改进，大大的提高了人们的生活质量。

现有的接口监控测试方案利用接口测试框架进行脚本编写，并进行部署产生相应的测试报告。编写测试脚本的人员需要一定的代码水平。部分业务接口用例复用性高，重复工作较多。当接口产生变动时，需要进行接口脚本维护，效率低下并产生大量的人工成本。接口测试脚本部署时，无法对重要场景及多种线上环境进行实时监控，造成线上风险。

发明内容

为克服上述问题，本发明的目的是提供一种基于线上流量脚本生成来对线上流量数据进行分析，保障线上稳定性的多环境监控测试方法，无需人工脚本编写，且能够实时对线上情况进行监控。

本发明采用以下方案实现：基于线上流量脚本生成的多环境监控测试方法，其特征在于：所述测试方法包括如下步骤：

步骤S1、获取线上流量即根据线上外部调用该项目接口返回的数据，查看项目的接口数据，获取线上调用的接口数据；

步骤S2、线上流量数据分析即将线上的接口数据进行分析；

步骤S3、验证脚本生成即按照所述线上流量数据分析的接口框架，进行脚本数据填充；

步骤S4、同步脚本即将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

步骤S5、域名配置即针对所述同步脚本所要监控的线上环境；

步骤S6、执行测试即根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

进一步的，所述步骤S2进一步具体包括如下步骤：

步骤S21、定时统计预设时间内的用户接口请求，获取所有的接口请求，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用的次数进行排序，排序在前25％-35％范围内的定义为核心接口；

步骤S22、获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中；

步骤S23、定义特殊用例值，便于进行反向用例操作，结合请求数据中的接口参数，生成符合该类型的值和不符合参数类型的值，并通过特殊用例值对这些类型值进行赋值；

步骤S24、将接口请求参数进行分类，分成常用参数名和其他参数名。

进一步的，所述步骤S3进一步具体包括如下步骤：

步骤S31、填充配置config文件即将前端配置信息及线上流量获取的域名写入config文件中，成为静态常量；

步骤S32、用例数据准备即将线上流量数据分析出的url、请求数据写入脚本框架；

步骤S33、生成case用例即根据参数及url请求生成case用例；

步骤S34、发送请求、接收结果即根据生成的case用例进行接口请求发送；

步骤S35、断言api数据即将接收到的结果进行assert断言，判断用例是否报错，并将断言的结果保存到对应数据库中；

步骤S36、测试结果返回即将测试结果返回给用户。

进一步的，所述步骤S6进一步具体包括以下步骤：

步骤S61、拨测任务配置即脚本日常执行为拨测，脚本执行时间配置和结果推送人配置；

步骤S62、下发脚本到不同环境即根据环境配置，将脚本部署到不同环境的服务器上；

步骤S63、加载拨测配置即读取用户配置的拨测时间；

步骤S64、根据配置生成测试定时任务即根据拨测时间及频率生成测试定时任务；

步骤S65、执行脚本即根据定时任务执行脚本；

步骤S66、解析测试报告即将测试报告保存到数据库，并判断核心结果是否出错，是，则将测试报告推送给结果推送人，否，则触发告警服务，并将错误信息推送给核心结果推送人。

本发明还提供了基于线上流量脚本生成的多环境监控测试系统，其特征在于：所述测试系统包括获取线上流量模块、线上流量数据分析模块、验证脚本生成模块、同步脚本模块、域名配置模块和执行测试模块；

所述获取线上流量模块，用于根据线上外部调用该项目接口返回的数据，查看项目的接口数据；

所述线上数据分析模块，用于将线上的接口请求数据进行分析；

所述验证脚本生成模块，能够按照所述线上流量数据分析模块的接口框架，进行脚本数据填充；

所述同步脚本模块，用于将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

所述域名配置模块，用于针对所述同步脚本模块所要监控的线上环境；

所述执行测试模块，能够根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

进一步的，所述线上数据分析模块进一步包括：区分单元、存储单元、赋值单元和分类单元；

所述区分单元，用于对预设时间内的用户接口请求进行定时统计，获取所有的接口请求，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用的次数进行排序，排序在前25％-35％范围内的定义为核心接口；

所述存储单元，用于获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中；

所述赋值单元，通过定义特殊用例值，便于进行反向用例操作，结合请求数据中的接口参数，生成符合该类型的值和不符合参数类型的值，并通过特殊用例值对这些类型值进行赋值；

所述分类单元，用于将接口请求参数进行分类，分成常用参数名和其他参数名。

进一步的，所述验证脚本生成模块进一步包括：填充配置config文件单元、用例数据准备单元、生成case用例单元、发送请求、接收结果单元、断言api数据单元和测试结果返回单元；

所述填充配置config文件单元，用于将前端配置信息及线上流量获取的域名写入config文件中，成为静态常量；

所述用例数据准备单元，用于将线上流量数据分析出的url、请求数据写入脚本框架；

所述生成case用例单元，能够根据参数及url请求生成case用例；

所述发送请求、接收结果单元，能够根据生成的case用例进行接口请求发送；

所述断言api数据单元，用于将接收到的结果进行assert断言，判断用例是否报错，并将断言的结果保存到对应数据库中；

所述测试结果返回单元，用于将测试结果返回给用户。

进一步的，所述执行测试模块进一步包括：拨测任务配置单元、下发脚本到不同环境单元、加载拨测配置单元、根据配置生成测试定时任务单元、执行脚本单元和解析测试报告单元；

所述拨测任务配置单元，用于脚本日常执行为拨测，脚本执行时间配置和结果推送人配置；

所述下发脚本到不同环境单元，通过根据环境配置将脚本部署到不同环境的服务器上；

所述加载拨测配置单元，用于读取用户配置的拨测时间；

所述根据配置生成测试定时任务单元，用于通过根据拨测时间及频率生成测试定时任务；

所述执行脚本单元，用于通过根据定时任务执行脚本；

所述解析测试报告单元，用于将测试报告保存到数据库，并判断核心结果是否出错，是，则将测试报告推送给结果推送人，否，则触发告警服务，并将错误信息推送给核心结果推送人。

本发明的有益效果在于：本发明能够减少脚本编写工作量时间，降低人力成本；统一脚本规范，便于团队内部维护及理解脚本；统一基本脚本用例生成思路，便于理解和用例维护；对线上进行实时监控和预警，并针对异常数据进行实时监控和配置化推送，保障线上稳定性；可进行阶段性异常数据收集和分析，可以给产品一份阶段性的线上质量故障分析报告，从报告中可以直观的看出，对应时间段内，发生故障最多的原因和对应的时间区间，以便于更好的进行二次故障分析；可以进行同一项目多环境测试，保障项目在不同地区，不同服务器上的稳定性；本发明能够保障线上稳定性，效率高，能够节约人工成本，提高测试效率。

附图说明

图1是本发明的方法流程示意图。

图2为参数类型赋值的示意图。

图3为接口请求参数分类的示意图。

图4为自动脚本生成流程图。

图5为生成case用例的示意图。

图6为执行测试的流程示意图。

图7为本发明的系统原理框图。

具体实施方式

下面结合附图对本发明做进一步说明。

请参阅图1所示，本发明的基于线上流量脚本生成的多环境监控测试方法，所述测试方法包括如下步骤：

步骤S1、获取线上流量即根据线上外部调用该项目接口返回的数据，查看项目的接口数据，获取线上调用的接口数据；

步骤S2、线上流量数据分析即将线上的接口数据进行分析；

步骤S3、验证脚本生成即按照所述线上流量数据分析的接口框架，进行脚本数据填充；

步骤S4、同步脚本即将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

步骤S5、域名配置即针对所述同步脚本所要监控的线上环境；

步骤S6、执行测试即根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

下面结合一具体实施例对本发明做进一步说明：

本发明的基于线上流量脚本生成的多环境监控测试方法包括：

获取线上流量：根据线上外部调用该项目接口返回的数据，查看项目的接口数据。获取线上调用的接口数据。所述项目接口返回的数据就是ngnix数据，Ngnix数据：http代理服务器ngnix，通过代理服务器查看线上项目接口返回的数据，该数据包括：日志原文、HTTP状态码、域名、请求的URI等。通过对关键词的匹配，获取到有用数据，包括，域名、请求的URI，获取到域名、请求url、参数、参数值。

线上流量数据分析：将线上的接口请求数据进行分析。

第一：定时统计预设时间内的用户接口请求，获取所有的接口请求，所述预设时间较佳的可以是一周内，但不仅限于此，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用次数进行排序，排序在前25％-35％范围内的定义为核心接口。较佳的核心接口可以是排序在30％，但并不仅限于此，所述剩下的70％定义为其他接口。

第二：获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中。

第三：请求数据分析

1）给每个参数定义生成0，Null、None特殊用例值，便于进行反向用例操作；

2）结合请求数据中的接口参数，生成一些符合该类型的值和不符合参数类型的值，保证代码的健壮性。接口参数类型包括：object，string，boolean、integer、Long、array、number，并对的这些类型值进行特殊用例赋值，如图2所示：

3）将接口请求参数进行分类，分成常用参数名和其他参数名，常用参数名包括：page、index、size、type、limit、offset。其他参数名根据url所对应的id进行存储。如图3所示：

验证脚本生成：按照之前已有的接口框架，进行脚本数据填充。

如图4所示，提供了自动脚本生成流程图：

1）填充配置config文件：将前端配置信息，如用户名，密码等用户信息及线上流量自动获取的域名写入config文件，成为静态常量。

2）用例数据准备：将线上流量数据分析出的url、请求数据写入脚本框架；

3）生成case用例：根据参数及url请求生成case用例。包括如图5所示；

4）发送请求、接收结果：根据生成的用例进行接口请求发送。

5）断言api数据：将接收到的结果进行assert断言，判断用例是否报错，并将断言结果保存到对应的数据库中。

6）测试结果返回：将测试结果返回给用户。

同步脚本：将自动生成的脚本上按照域名匹配到项目上传到对应保存脚本的服务器上。

域名配置：域名配置是指针对脚本所要监控的线上环境。不同项目有不同的环境配置，如：无锡环境，香港环境和一些境外、国内环境等。

如图6所示，执行测试：根据脚本配置所对应的的环境进行脚本下发操作，并配置对应拨测时间。即把脚本下发到各个不同环境的服务器，然后根据拨测时间构建测试任务，进行脚本自动执行操作，并将测试结果返回给用户。

1）拨测任务配置：脚本日常执行为拨测，脚本执行时间配置，结果推送人配置，包括：核心接口推送人及其他推送人，脚本执行环境配置。

2）下发脚本到不同环境：根据环境配置，将脚本部署到不同环境的服务器上。

3）加载拨测配置：读取用户配置的拨测时间。

4）根据配置生成测试定时任务：根据拨测时间及频率生成测试定时任务。

5）执行脚本：根据定时任务执行脚本

6）解析测试报告：将测试报告保存到数据库，并判断是否为核心结果出错，如果不是核心结果出错。将测试报告推送给结果推送人，如果是核心结果出错，触发告警服务，并将错误信息推送给核心结果推送人。

请参阅图7所示，本发明还提供了基于线上流量脚本生成的多环境监控测试系统，所述测试系统包括获取线上流量模块、线上流量数据分析模块、验证脚本生成模块、同步脚本模块、域名配置模块和执行测试模块；

所述获取线上流量模块，用于根据线上外部调用该项目接口返回的数据，查看项目的接口数据；

所述线上数据分析模块，用于将线上的接口请求数据进行分析；

所述验证脚本生成模块，能够按照所述线上流量数据分析模块的接口框架，进行脚本数据填充；

所述同步脚本模块，用于将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

所述域名配置模块，用于针对所述同步脚本模块所要监控的线上环境；

所述执行测试模块，能够根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

所述线上数据分析模块进一步包括：区分单元、存储单元、赋值单元和分类单元；

所述区分单元，用于对预设时间内的用户接口请求进行定时统计，获取所有的接口请求，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用的次数进行排序，排序在前25％-35％范围内的定义为核心接口；

所述存储单元，用于获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中；

所述赋值单元，通过定义特殊用例值，便于进行反向用例操作，结合请求数据中的接口参数，生成符合该类型的值和不符合参数类型的值，并通过特殊用例值对这些类型值进行赋值；

所述分类单元，用于将接口请求参数进行分类，分成常用参数名和其他参数名。

所述验证脚本生成模块进一步包括：填充配置config文件单元、用例数据准备单元、生成case用例单元、发送请求、接收结果单元、断言api数据单元和测试结果返回单元；

所述填充配置config文件单元，用于将前端配置信息及线上流量获取的域名写入config文件中，成为静态常量；

所述用例数据准备单元，用于将线上流量数据分析出的url、请求数据写入脚本框架；

所述生成case用例单元，能够根据参数及url请求生成case用例；

所述发送请求、接收结果单元，能够根据生成的case用例进行接口请求发送；

所述断言api数据单元，用于将接收到的结果进行assert断言，判断用例是否报错，并将断言的结果保存到对应数据库中；

所述测试结果返回单元，用于将测试结果返回给用户。

所述执行测试模块进一步包括：拨测任务配置单元、下发脚本到不同环境单元、加载拨测配置单元、根据配置生成测试定时任务单元、执行脚本单元和解析测试报告单元；

所述拨测任务配置单元，用于脚本日常执行为拨测，脚本执行时间配置和结果推送人配置；

所述下发脚本到不同环境单元，通过根据环境配置将脚本部署到不同环境的服务器上；

所述加载拨测配置单元，用于读取用户配置的拨测时间；

所述根据配置生成测试定时任务单元，用于通过根据拨测时间及频率生成测试定时任务；

所述执行脚本单元，用于通过根据定时任务执行脚本；

所述解析测试报告单元，用于将测试报告保存到数据库，并判断核心结果是否出错，是，则将测试报告推送给结果推送人，否，则触发告警服务，并将错误信息推送给核心结果推送人。

本发明是为了解放人工编写脚本产生的人力，提高代码的稳定性及质量，使代码更贴近用户，考虑采用自动生成的脚本代替人工脚本编写，而为了实时对线上情况进行监控，使监控数据更加贴近用户，我们可以针对线上流量进行分析，第一，对接口进行分析，拆分出核心接口和其他接口，第二，对线上流量数据进行分析，抓取有用的请求数据，根据这些信息进行自动脚本生成，并将自动化脚本自动部署到线上，进行实时监控，从而保障线上稳定性，采用这种自动化测试，效率高，能节约人工成本，提高测试效率。

以上所述仅为本发明的较佳实施例，凡依本发明申请专利范围所做的均等变化与修饰，皆应属本发明的涵盖范围。

Claims (8)

1.一种基于线上流量脚本生成的多环境监控测试方法，其特征在于：所述测试方法包括如下步骤：

步骤S1、获取线上流量即根据线上外部调用该项目接口返回的数据，查看项目的接口数据，获取线上调用的接口数据；

步骤S2、线上流量数据分析即将线上的接口数据进行分析；

步骤S3、验证脚本生成即按照所述线上流量数据分析的接口框架，进行脚本数据填充；

步骤S4、同步脚本即将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

步骤S5、域名配置即针对所述同步脚本所要监控的线上环境；

步骤S6、执行测试即根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

2.根据权利要求1所述的基于线上流量脚本生成的多环境监控测试方法，其特征在于：所述步骤S2进一步具体包括如下步骤：

步骤S21、定时统计预设时间内的用户接口请求，获取所有的接口请求，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用的次数进行排序，排序在前25％-35％范围内的定义为核心接口；

步骤S22、获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中；

步骤S23、定义特殊用例值，便于进行反向用例操作，结合请求数据中的接口参数，生成符合该类型的值和不符合参数类型的值，并通过特殊用例值对这些类型值进行赋值；

步骤S24、将接口请求参数进行分类，分成常用参数名和其他参数名。

3.根据权利要求1所述的基于线上流量脚本生成的多环境监控测试方法，其特征在于：所述步骤S3进一步具体包括如下步骤：

步骤S31、填充配置config文件即将前端配置信息及线上流量获取的域名写入config文件中，成为静态常量；

步骤S32、用例数据准备即将线上流量数据分析出的url、请求数据写入脚本框架；

步骤S33、生成case用例即根据参数及url请求生成case用例；

步骤S34、发送请求、接收结果即根据生成的case用例进行接口请求发送；

步骤S35、断言api数据即将接收到的结果进行assert断言，判断用例是否报错，并将断言的结果保存到对应数据库中；

步骤S36、测试结果返回即将测试结果返回给用户。

4.根据权利要求1所述的基于线上流量脚本生成的多环境监控测试方法，其特征在于：所述步骤S6进一步具体包括以下步骤：

步骤S61、拨测任务配置即脚本日常执行为拨测，脚本执行时间配置和结果推送人配置；

步骤S62、下发脚本到不同环境即根据环境配置，将脚本部署到不同环境的服务器上；

步骤S63、加载拨测配置即读取用户配置的拨测时间；

步骤S64、根据配置生成测试定时任务即根据拨测时间及频率生成测试定时任务；

步骤S65、执行脚本即根据定时任务执行脚本；

步骤S66、解析测试报告即将测试报告保存到数据库，并判断核心结果是否出错，是，则将测试报告推送给结果推送人，否，则触发告警服务，并将错误信息推送给核心结果推送人。

5.一种基于线上流量脚本生成的多环境监控测试系统，其特征在于：所述测试系统包括获取线上流量模块、线上流量数据分析模块、验证脚本生成模块、同步脚本模块、域名配置模块和执行测试模块；

所述获取线上流量模块，用于根据线上外部调用该项目接口返回的数据，查看项目的接口数据；

所述线上数据分析模块，用于将线上的接口请求数据进行分析；

所述验证脚本生成模块，能够按照所述线上流量数据分析模块的接口框架，进行脚本数据填充；

所述同步脚本模块，用于将自动生成的脚本按照域名匹配到对应保存脚本的服务器上；

所述域名配置模块，用于针对所述同步脚本模块所要监控的线上环境；

所述执行测试模块，能够根据脚本配置所对应的线上环境进行脚本下方操作，并配置对应拨测的时间。

6.根据权利要求5所述的基于线上流量脚本生成的多环境监控测试系统，其特征在于：所述线上数据分析模块进一步包括：区分单元、存储单元、赋值单元和分类单元，所述区分单元，用于对预设时间内的用户接口请求进行定时统计，获取所有的接口请求，根据域名来区分接口请求，再将相同域名的接口请求进行数据统计，按照调用的次数进行排序，排序在前25％-35％范围内的定义为核心接口；

所述存储单元，用于获取对应的请求url和域名，将请求url和域名保存到对应的数据库表中；

所述赋值单元，通过定义特殊用例值，便于进行反向用例操作，结合请求数据中的接口参数，生成符合该类型的值和不符合参数类型的值，并通过特殊用例值对这些类型值进行赋值；

所述分类单元，用于将接口请求参数进行分类，分成常用参数名和其他参数名。

7.根据权利要求5所述的基于线上流量脚本生成的多环境监控测试系统，其特征在于：所述验证脚本生成模块进一步包括：填充配置config文件单元、用例数据准备单元、生成case用例单元、发送请求、接收结果单元、断言api数据单元和测试结果返回单元；

所述填充配置config文件单元，用于将前端配置信息及线上流量获取的域名写入config文件中，成为静态常量；

所述用例数据准备单元，用于将线上流量数据分析出的url、请求数据写入脚本框架；

所述生成case用例单元，能够根据参数及url请求生成case用例；

所述发送请求、接收结果单元，能够根据生成的case用例进行接口请求发送；

所述断言api数据单元，用于将接收到的结果进行assert断言，判断用例是否报错，并将断言的结果保存到对应数据库中；

所述测试结果返回单元，用于将测试结果返回给用户。

8.根据权利要求5所述的基于线上流量脚本生成的多环境监控测试系统，其特征在于：所述执行测试模块进一步包括：拨测任务配置单元、下发脚本到不同环境单元、加载拨测配置单元、根据配置生成测试定时任务单元、执行脚本单元和解析测试报告单元；

所述拨测任务配置单元，用于脚本日常执行为拨测，脚本执行时间配置和结果推送人配置；

所述下发脚本到不同环境单元，通过根据环境配置将脚本部署到不同环境的服务器上；

所述加载拨测配置单元，用于读取用户配置的拨测时间；

所述根据配置生成测试定时任务单元，用于通过根据拨测时间及频率生成测试定时任务；

所述执行脚本单元，用于通过根据定时任务执行脚本；

所述解析测试报告单元，用于将测试报告保存到数据库，并判断核心结果是否出错，是，则将测试报告推送给结果推送人，否，则触发告警服务，并将错误信息推送给核心结果推送人。

Images