CN109597729A - 一种基于模拟用户测试的监控方法和装置 - Google Patents
一种基于模拟用户测试的监控方法和装置 Download PDFInfo
- Publication number
- CN109597729A CN109597729A CN201811389196.2A CN201811389196A CN109597729A CN 109597729 A CN109597729 A CN 109597729A CN 201811389196 A CN201811389196 A CN 201811389196A CN 109597729 A CN109597729 A CN 109597729A
- Authority
- CN
- China
- Prior art keywords
- interface
- test
- preset duration
- object code
- duration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 172
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000012544 monitoring process Methods 0.000 title claims abstract description 24
- 230000004044 response Effects 0.000 claims description 69
- 238000003860 storage Methods 0.000 claims description 30
- 230000002159 abnormal effect Effects 0.000 claims description 28
- 238000009434 installation Methods 0.000 claims description 10
- 235000013399 edible fruits Nutrition 0.000 claims description 4
- 238000012806 monitoring device Methods 0.000 claims description 4
- 238000004088 simulation Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 17
- 230000006399 behavior Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000015654 memory Effects 0.000 description 6
- 241000208340 Araliaceae Species 0.000 description 4
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 4
- 235000003140 Panax quinquefolius Nutrition 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 4
- 230000007613 environmental effect Effects 0.000 description 4
- 235000008434 ginseng Nutrition 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005304 joining Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2205—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested
- G06F11/2221—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested to test input/output devices or peripheral units
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明实施例提供了一种基于模拟用户测试的监控方法和装置。该方法包括：根据接口的重要程度为接口设置测试周期；根据接口的功能为接口设置输入参数；每隔测试周期，根据输入参数生成请求命令，请求命令用于对接口进行模拟用户测试；执行请求命令，对接口进行模拟用户测试，其中，在接口正常的情况下，接口在预设时长内返回目标代码；判断在预设时长内是否接收到接口返回的目标代码；如果在预设时长内接收到接口返回的目标代码，则确定接口正常。因此，本发明实施例提供的技术方案能够解决现有技术中系统环境异常时监控滞后的问题。
Description
【技术领域】
本发明涉及监控领域，尤其涉及一种基于模拟用户测试的监控方法和装置。
【背景技术】
目前的监控方式是通过真实的用户操作行为，然后在生产环境上做一些阈值设置，比如机器的物理性能如cpu等是否达到阈值，日志中error等相关的信息是否到达一定的数量等等，如果达到阈值，系统触发报警功能，这种监控方式往往是滞后的，所表现出来的问题往往都是较为严重的问题，解决起来要花费很大精力。
【发明内容】
有鉴于此，本发明实施例提供了一种基于模拟用户测试的监控方法和装置，用以解决现有技术系统环境异常时监控滞后的问题。
一方面，本发明实施例提供了一种基于模拟用户测试的监控方法，所述方法包括：根据接口的重要程度为所述接口设置测试周期；根据所述接口的功能为所述接口设置输入参数；每隔所述测试周期，根据所述输入参数生成请求命令，所述请求命令用于对所述接口进行模拟用户测试；执行所述请求命令，对所述接口进行模拟用户测试，其中，在所述接口正常的情况下，所述接口在预设时长内返回目标代码；判断在所述预设时长内是否接收到所述接口返回的所述目标代码；如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常。
进一步地，在所述根据所述输入参数生成请求命令之前，所述方法还包括：使用jmeter+ant+jenkins搭建自动化测试框架，在所述确定所述接口正常之后，所述方法还包括：生成所述接口的测试报告，所述根据接口的重要程度为所述接口设置测试周期，包括：在jmeter中根据接口的重要程度为所述接口设置所述测试周期，在所述根据所述输入参数生成请求命令之前，所述方法还包括：新建配置文件；在所述配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
进一步地，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之前，所述方法还包括：获取所述接口的多个历史响应时长；根据所述接口的所述多个历史响应时长确定所述预设时长。
进一步地，所述根据所述接口的所述多个历史响应时长确定所述预设时长，包括：根据所述多个历史响应时长的大小对所述多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为所述预设时长，或，计算所述多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到所述预设时长，所述误差参数根据所述接口的测试环境预先确定。
进一步地，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，所述方法还包括：如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常。
进一步地，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，所述方法还包括：如果在所述预设时长内未接收到所述接口返回的代码，则重新对所述接口进行模拟用户测试，并判断在所述预设时长内是否接收到所述接口返回的所述目标代码；如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常；如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常；如果在所述预设时长内未接收到所述接口返回的代码，则确定所述接口异常；如果确定所述接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
一方面，本发明实施例提供了一种基于模拟用户测试的监控装置，所述装置包括：第一设置单元，用于根据接口的重要程度为所述接口设置测试周期；第二设置单元，用于根据所述接口的功能为所述接口设置输入参数；第一生成单元，用于每隔所述测试周期，根据所述输入参数生成请求命令，所述请求命令用于对所述接口进行模拟用户测试；执行单元，用于执行所述请求命令，对所述接口进行模拟用户测试，其中，在所述接口正常的情况下，所述接口在预设时长内返回目标代码；判断单元，用于判断在所述预设时长内是否接收到所述接口返回的所述目标代码；第一确定单元，用于如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常。
进一步地，所述装置还包括：搭建单元，用于在所述第一生成单元根据所述输入参数生成请求命令之前，使用jmeter+ant+jenkins搭建自动化测试框架，第二生成单元，用于在所述第一确定单元确定所述接口正常之后，生成所述接口的测试报告，所述第一设置单元用于：在jmeter中根据接口的重要程度为所述接口设置所述测试周期，新建单元，用于在所述第一生成单元根据所述输入参数生成请求命令之前，新建配置文件；配置单元，用于在所述配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
进一步地，所述装置还包括：获取单元，用于在所述判断单元判断在所述预设时长内是否接收到所述接口返回的所述目标代码之前，获取所述接口的多个历史响应时长；第二确定单元，用于根据所述接口的所述多个历史响应时长确定所述预设时长。
进一步地，所述第二确定单元包括：第一确定子单元，用于：根据所述多个历史响应时长的大小对所述多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为所述预设时长，或，第二确定子单元，用于：计算所述多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到所述预设时长，所述误差参数根据所述接口的测试环境预先确定。
进一步地，所述装置还包括：第三确定单元，用于在所述判断单元判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常。
进一步地，所述装置还包括：测试单元，用于在所述判断单元判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，如果在所述预设时长内未接收到所述接口返回的代码，则重新对所述接口进行模拟用户测试，并判断在所述预设时长内是否接收到所述接口返回的所述目标代码；第四确定单元，用于如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常；第五确定单元，用于如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常；第六确定单元，用于如果在所述预设时长内未接收到所述接口返回的代码，则确定所述接口异常；打包单元，用于如果确定所述接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
一方面，本发明实施例提供了一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在设备执行上述的基于模拟用户测试的监控方法。
一方面，本发明实施例提供了一种计算机设备，包括存储器和处理器，所述存储器用于存储包括程序指令的信息，所述处理器用于控制程序指令的执行，所述程序指令被处理器加载并执行时实现上述的基于模拟用户测试的监控方法的步骤。
通过根据接口的重要程度为接口设置测试周期，根据接口的功能为接口设置输入参数，每隔测试周期，根据输入参数生成请求命令，执行请求命令，对接口进行模拟用户测试，对重要的接口进行测试的次数多，对不太重要的接口进行测试的次数少，在保证了重要接口及时得到测试的情况下避免了过多测试对服务器造成不必要的压力，通过模拟用户对接口进行测试，在异常情况大面积出现之前就能及时向相关人员告警，达到了预警的效果，解决了现有技术系统环境异常时监控滞后的问题。
【附图说明】
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1是根据本发明实施例一种可选的基于模拟用户测试的监控方法的流程图；
图2是根据本发明实施例一种可选的基于模拟用户测试的监控装置的示意图。
【具体实施方式】
为了更好的理解本发明的技术方案，下面结合附图对本发明实施例进行详细描述。
应当明确，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
本发明实施例提供了一种基于模拟用户测试的监控方法，如图1所示，该方法包括：
步骤S102：根据接口的重要程度为接口设置测试周期；
步骤S104：根据接口的功能为接口设置输入参数；
步骤S106：每隔测试周期，根据输入参数生成请求命令，请求命令用于对接口进行模拟用户测试；
步骤S108：执行请求命令，对接口进行模拟用户测试，其中，在接口正常的情况下，接口在预设时长内返回目标代码；
步骤S110：判断在预设时长内是否接收到接口返回的目标代码；
步骤S112：如果在预设时长内接收到接口返回的目标代码，则确定接口正常。
根据接口的重要程度设置测试周期，接口的重要程度越高，测试周期越短，例如，接口A非常重要，设置接口A的测试周期为5分钟，则每隔5分钟对接口A进行测试；接口B的重要性不及接口A，设置接口B的测试周期为15分钟，每隔15分钟对接口B进行测试。
根据接口的功能为接口设置输入参数，输入参数可以包括类别和数量，例如，接口A的功能是供用户查询保险产品，则输入参数可以包括保险产品的类别和数量；接口B的功能是供用户查询理财产品，则输入参数可以包括理财产品的类别和数量。
通过根据接口的重要程度为接口设置测试周期，根据接口的功能为接口设置输入参数，每隔测试周期，根据输入参数生成请求命令，执行请求命令，对接口进行模拟用户测试，对重要的接口进行测试的次数多，对不太重要的接口进行测试的次数少，在保证了重要接口及时得到测试的情况下避免了过多测试对服务器造成不必要的压力，通过模拟用户对接口进行测试，在异常情况大面积出现之前就能及时向相关人员告警，达到了预警的效果，解决了现有技术系统环境异常时监控滞后的问题。
在根据输入参数生成请求命令之前，方法还包括：使用jmeter+ant+jenkins搭建自动化测试框架，在确定接口正常之后，方法还包括：生成接口的测试报告，根据接口的重要程度为接口设置测试周期，包括：在jmeter中根据接口的重要程度为接口设置测试周期，在根据输入参数生成请求命令之前，方法还包括：新建配置文件；在配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
在根据接口的重要程度为接口设置测试参数之前，方法还包括：使用jenkins构建自动化测试框架。使用jenkins构建自动化测试框架，可以使用jmeter+ant+jenkins来进行搭建，在jmeter中可以对接口的请求脚本、请求参数和请求方式进行设置，ant通过构建命令来执行jmeter接口测试，并生成测试报告。
jmeter是Apache组织开发的基于Java的压力测试工具，可以用于对静态的和动态的资源(文件，Servlet，Perl脚本，java对象，数据库和查询，FTP服务器等等)的性能进行测试。ant是一个将软件编译、测试、部署等步骤联系在一起加以自动化的一个工具，大多用于Java环境中的软件开发。
根据测试参数对接口进行模拟用户测试，可以通过Jenkins自动定时去执行，Jenkins是一个持续集成工具。
在jmeter中对接口的请求脚本、请求参数和请求方式进行设置时，请求脚本可以按照每个接口具体的请求逻辑使用编程语言进行编写，如果接口需要传入参数，则可以使用固定参数或按照一定规律的可变参数作为请求参数传入接口，请求方式可以使用基于http协议的rest方式。
在ant中构建命令对jmeter进行调用则是通过新建ant的配置文件完成的。具体操作时，可以新建一个配置文件，取名为build.xml，在build.xml中需要配置的内容有：jmeter的安装路径；jmeter生成的报告存放路径，需提前建好文件夹或使用已有的文件夹；jmeter生成报告的报告命名规范；jmeter测试脚本存放路径。
在配置完jmeter和ant之后，即可在jenkins中创建对接口的模拟用户测试任务，包括：新建任务；对任务配置构建信息。
在对任务配置构建信息时，根据测试框架需要按照“invoke ant”的方式进行构建，该方式会按照ant配置文件(比如build.xml)对接口进行调用。构建完成之后，就可以启动该测试任务。
可选地，判断在预设时长内是否接收到接口返回的目标代码之前，方法还包括：获取接口的多个历史响应时长；根据接口的多个历史响应时长确定预设时长。
根据接口的历史响应时间数据，预测接口的正常响应时长，该正常响应时长即为预设时长。
可选地，根据接口的多个历史响应时长确定预设时长，包括：根据多个历史响应时长的大小对多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为预设时长，或，计算多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到预设时长，误差参数根据接口的测试环境预先确定。
在本方案中，使用了主动式监控(根据用户行为场景，不需要用户操作，模拟用户行为定时发起)，在大规模异常之前就监控到异常信息，达到及时预警的效果。本方案还可以结合被动式监控(由用户发起)，达到无遗漏监控的效果。
接口预设时长的获取可以通过对接口的历史日志数据进行格式化来得到，具体实施时，可以将日志文件输出到消息队列中(比如rocketmq)，通过spark(或storm)将数据按照标准格式转换为所需的响应时间数据，并存储到数据库中，接口响应时间数据的内容包括有接口名称、接口地址、接口入参、接口回参、接口响应时间等信息。
可选地，判断在预设时长内是否接收到接口返回的目标代码之后，方法还包括：如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常。
可选地，判断在预设时长内是否接收到接口返回的目标代码之后，方法还包括：如果在预设时长内未接收到接口返回的代码，则重新根据测试参数对接口进行模拟用户测试，并判断在预设时长内是否接收到接口返回的目标代码，如果在预设时长内接收到接口返回的目标代码，则确定接口正常；如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常；如果在预设时长内未接收到接口返回的代码，则确定接口异常，此时接口异常为超时异常，通知目标用户，同时ping接口所在的网关、服务器、数据库。如果ping接口所在的网关、服务器、数据库之后，发现问题，则通知相关工作人员。例如，确定接口异常之后，ping接口所在的网关、服务器、数据库，发现网关、数据库都没有问题，服务器有问题，将接口异常信息和服务器异常数据进行打包，发送至接口的相关工作人员，还可以发送至服务器的维护人员。针对每个监控的接口，会根据这个接口所涉及的系统、服务，都会去ping一下，最大限度的去定位到相关的出错环节。通过时间和出错信息两个角度来监控，精确判断接口异常。
可选地，在确定接口异常之后，方法还包括：将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。发送至相关工作人员的方式可以为邮件、短信、或者微信的方式。
本方案中，通过使用模拟用户对接口进行不同频率的模拟测试，实现了提前感知接口风险，同时根据不同的返回代码对接口进行监控，提高了测试准确度，结合对接口所在网关、服务器、数据库的分析，多维度挖掘故障点，实现了接口异常的精准分析，快速定位，提前排除性能隐患。
本发明实施例提供了一种基于模拟用户测试的监控装置，该装置用于执行上述基于模拟用户测试的监控方法，如图2所示，该装置包括：第一设置单元10、第二设置单元20、第一生成单元30、执行单元40、判断单元50、第一确定单元60。
第一设置单元10，用于根据接口的重要程度为接口设置测试周期。
第二设置单元20，用于根据接口的功能为接口设置输入参数。
第一生成单元30，用于每隔测试周期，根据输入参数生成请求命令，请求命令用于对接口进行模拟用户测试。
执行单元40，用于执行请求命令，对接口进行模拟用户测试，其中，在接口正常的情况下，接口在预设时长内返回目标代码。
判断单元50，用于判断在预设时长内是否接收到接口返回的目标代码。
第一确定单元60，用于如果在预设时长内接收到接口返回的目标代码，则确定接口正常。
根据接口的重要程度设置测试周期，接口的重要程度越高，测试周期越短，例如，接口A非常重要，设置接口A的测试周期为5分钟，则每隔5分钟对接口A进行测试；接口B的重要性不及接口A，设置接口B的测试周期为15分钟，每隔15分钟对接口B进行测试。
根据接口的功能为接口设置输入参数，输入参数可以包括类别和数量，例如，接口A的功能是供用户查询保险产品，则输入参数可以包括保险产品的类别和数量；接口B的功能是供用户查询理财产品，则输入参数可以包括理财产品的类别和数量。
通过根据接口的重要程度为接口设置测试周期，根据接口的功能为接口设置输入参数，每隔测试周期，根据输入参数生成请求命令，执行请求命令，对接口进行模拟用户测试，对重要的接口进行测试的次数多，对不太重要的接口进行测试的次数少，在保证了重要接口及时得到测试的情况下避免了过多测试对服务器造成不必要的压力，通过模拟用户对接口进行测试，在异常情况大面积出现之前就能及时向相关人员告警，达到了预警的效果，解决了现有技术系统环境异常时监控滞后的问题。
可选地，装置还包括：搭建单元、第二生成单元、新建单元、配置单元。搭建单元，用于在第一生成单元30根据输入参数生成请求命令之前，使用jmeter+ant+jenkins搭建自动化测试框架。第二生成单元，用于在第一确定单元确定接口正常之后，生成接口的测试报告。第一设置单元用于：在jmeter中根据接口的重要程度为接口设置测试周期。新建单元，用于在第一生成单元根据输入参数生成请求命令之前，新建配置文件。配置单元，用于在配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
在根据接口的重要程度为接口设置测试参数之前，使用jenkins构建自动化测试框架。使用jenkins构建自动化测试框架，可以使用jmeter+ant+jenkins来进行搭建，在jmeter中可以对接口的请求脚本、请求参数和请求方式进行设置，ant通过构建命令来执行jmeter接口测试，并生成测试报告。
jmeter是Apache组织开发的基于Java的压力测试工具，可以用于对静态的和动态的资源(文件，Servlet，Perl脚本，java对象，数据库和查询，FTP服务器等等)的性能进行测试。ant是一个将软件编译、测试、部署等步骤联系在一起加以自动化的一个工具，大多用于Java环境中的软件开发。
根据测试参数对接口进行模拟用户测试，可以通过Jenkins自动定时去执行，Jenkins是一个持续集成工具。
在jmeter中对接口的请求脚本、请求参数和请求方式进行设置时，请求脚本可以按照每个接口具体的请求逻辑使用编程语言进行编写，如果接口需要传入参数，则可以使用固定参数或按照一定规律的可变参数作为请求参数传入接口，请求方式可以使用基于http协议的rest方式。
在ant中构建命令对jmeter进行调用则是通过新建ant的配置文件完成的。具体操作时，可以新建一个配置文件，取名为build.xml，在build.xml中需要配置的内容有：jmeter的安装路径；jmeter生成的报告存放路径，需提前建好文件夹或使用已有的文件夹；jmeter生成报告的报告命名规范；jmeter测试脚本存放路径。
在配置完jmeter和ant之后，即可在jenkins中创建对接口的模拟用户测试任务，包括：新建任务；对任务配置构建信息。
在对任务配置构建信息时，根据测试框架需要按照“invoke ant”的方式进行构建，该方式会按照ant配置文件(比如build.xml)对接口进行调用。构建完成之后，就可以启动该测试任务。
可选地，装置还包括：获取单元、第二确定单元。获取单元，用于在判断单元50判断在预设时长内是否接收到接口返回的目标代码之前，获取接口的多个历史响应时长。第二确定单元，用于根据接口的多个历史响应时长确定预设时长。
根据接口的历史响应时间数据，预测接口的正常响应时长，该正常响应时长即为预设时长。
可选地，第二确定单元包括：第一确定子单元和/或第二确定子单元。第一确定子单元，用于：根据多个历史响应时长的大小对多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为预设时长。第二确定子单元，用于：计算多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到预设时长，误差参数根据接口的测试环境预先确定。
在本方案中，使用了主动式监控(根据用户行为场景，不需要用户操作，模拟用户行为定时发起)，在大规模异常之前就监控到异常信息，达到及时预警的效果。本方案还可以结合被动式监控(由用户发起)，达到无遗漏监控的效果。
接口预设时长的获取可以通过对接口的历史日志数据进行格式化来得到，具体实施时，可以将日志文件输出到消息队列中(比如rocketmq)，通过spark(或storm)将数据按照标准格式转换为所需的响应时间数据，并存储到数据库中，接口响应时间数据的内容包括有接口名称、接口地址、接口入参、接口回参、接口响应时间等信息。
可选地，装置还包括：第三确定单元。第三确定单元，用于在判断单元50判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常。
可选地，装置还包括：测试单元、第四确定单元、第五确定单元、第六确定单元、打包单元。测试单元，用于在判断单元50判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内未接收到接口返回的代码，则重新对接口进行模拟用户测试，并判断在预设时长内是否接收到接口返回的目标代码。第四确定单元，用于如果在预设时长内接收到接口返回的目标代码，则确定接口正常。第五确定单元，用于如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常。第六确定单元，用于如果在预设时长内未接收到接口返回的代码，则确定接口异常。打包单元，用于如果确定接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
本方案中，通过使用模拟用户对接口进行不同频率的模拟测试，实现了提前感知接口风险，同时根据不同的返回代码对接口进行监控，提高了测试准确度，结合对接口所在网关、服务器、数据库的分析，多维度挖掘故障点，实现了接口异常的精准分析，快速定位，提前排除性能隐患。
一方面，本发明实施例提供了一种存储介质，存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行以下步骤：根据接口的重要程度为接口设置测试周期；根据接口的功能为接口设置输入参数；每隔测试周期，根据输入参数生成请求命令，请求命令用于对接口进行模拟用户测试；执行请求命令，对接口进行模拟用户测试，其中，在接口正常的情况下，接口在预设时长内返回目标代码；判断在预设时长内是否接收到接口返回的目标代码；如果在预设时长内接收到接口返回的目标代码，则确定接口正常。
可选地，在程序运行时控制存储介质所在设备还执行以下步骤：在根据输入参数生成请求命令之前，使用jmeter+ant+jenkins搭建自动化测试框架，在确定接口正常之后，生成接口的测试报告，根据接口的重要程度为接口设置测试周期，在jmeter中根据接口的重要程度为接口设置测试周期，在根据输入参数生成请求命令之前，新建配置文件；在配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
可选地，在程序运行时控制存储介质所在设备还执行以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之前，获取接口的多个历史响应时长；根据接口的多个历史响应时长确定预设时长。
可选地，在程序运行时控制存储介质所在设备还执行以下步骤：根据多个历史响应时长的大小对多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为预设时长，或，计算多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到预设时长，误差参数根据接口的测试环境预先确定。
可选地，在程序运行时控制存储介质所在设备还执行以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常。
可选地，在程序运行时控制存储介质所在设备还执行以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内未接收到接口返回的代码，则重新对接口进行模拟用户测试，并判断在预设时长内是否接收到接口返回的目标代码；如果在预设时长内接收到接口返回的目标代码，则确定接口正常；如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常；如果在预设时长内未接收到接口返回的代码，则确定接口异常；如果确定接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
一方面，本发明实施例提供了一种计算机设备，包括存储器和处理器，存储器用于存储包括程序指令的信息，处理器用于控制程序指令的执行，程序指令被处理器加载并执行时实现以下步骤：根据接口的重要程度为接口设置测试周期；根据接口的功能为接口设置输入参数；每隔测试周期，根据输入参数生成请求命令，请求命令用于对接口进行模拟用户测试；执行请求命令，对接口进行模拟用户测试，其中，在接口正常的情况下，接口在预设时长内返回目标代码；判断在预设时长内是否接收到接口返回的目标代码；如果在预设时长内接收到接口返回的目标代码，则确定接口正常。
可选地，程序指令被处理器加载并执行时还实现以下步骤：在根据输入参数生成请求命令之前，使用jmeter+ant+jenkins搭建自动化测试框架，在确定接口正常之后，生成接口的测试报告，根据接口的重要程度为接口设置测试周期，在jmeter中根据接口的重要程度为接口设置测试周期，在根据输入参数生成请求命令之前，新建配置文件；在配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
可选地，程序指令被处理器加载并执行时还实现以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之前，获取接口的多个历史响应时长；根据接口的多个历史响应时长确定预设时长。
可选地，程序指令被处理器加载并执行时还实现以下步骤：根据多个历史响应时长的大小对多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为预设时长，或，计算多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到预设时长，误差参数根据接口的测试环境预先确定。
可选地，程序指令被处理器加载并执行时还实现以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常。
可选地，程序指令被处理器加载并执行时还实现以下步骤：在判断在预设时长内是否接收到接口返回的目标代码之后，如果在预设时长内未接收到接口返回的代码，则重新对接口进行模拟用户测试，并判断在预设时长内是否接收到接口返回的目标代码；如果在预设时长内接收到接口返回的目标代码，则确定接口正常；如果在预设时长内接口返回的代码与目标代码不同，则确定接口异常；如果在预设时长内未接收到接口返回的代码，则确定接口异常；如果确定接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机装置(可以是个人计算机，服务器，或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。
Claims (10)
1.一种基于模拟用户测试的监控方法，其特征在于，所述方法包括：
根据接口的重要程度为所述接口设置测试周期；
根据所述接口的功能为所述接口设置输入参数；
每隔所述测试周期，根据所述输入参数生成请求命令，所述请求命令用于对所述接口进行模拟用户测试；
执行所述请求命令，对所述接口进行模拟用户测试，其中，在所述接口正常的情况下，所述接口在预设时长内返回目标代码；
判断在所述预设时长内是否接收到所述接口返回的所述目标代码；
如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常。
2.根据权利要求1所述的方法，其特征在于，
在所述根据所述输入参数生成请求命令之前，所述方法还包括：使用jmeter+ant+jenkins搭建自动化测试框架，
在所述确定所述接口正常之后，所述方法还包括：生成所述接口的测试报告，
所述根据接口的重要程度为所述接口设置测试周期，包括：在jmeter中根据接口的重要程度为所述接口设置所述测试周期，
在所述根据所述输入参数生成请求命令之前，所述方法还包括：新建配置文件；在所述配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
3.根据权利要求1所述的方法，其特征在于，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之前，所述方法还包括：
获取所述接口的多个历史响应时长；
根据所述接口的所述多个历史响应时长确定所述预设时长。
4.根据权利要求3所述的方法，其特征在于，所述根据所述接口的所述多个历史响应时长确定所述预设时长，包括：
根据所述多个历史响应时长的大小对所述多个历史响应时长进行排序，得到排序结果；筛选出位于排序结果中间的预设比例的历史响应时长；将筛选出的历史响应时长中最大的历史响应时长作为所述预设时长，
或，
计算所述多个历史响应时长的平均值或中位数；将平均值或中位数与误差参数求和，得到所述预设时长，所述误差参数根据所述接口的测试环境预先确定。
5.根据权利要求1所述的方法，其特征在于，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，所述方法还包括：
如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常。
6.根据权利要求1所述的方法，其特征在于，在所述判断在所述预设时长内是否接收到所述接口返回的所述目标代码之后，所述方法还包括：
如果在所述预设时长内未接收到所述接口返回的代码，则重新对所述接口进行模拟用户测试，并判断在所述预设时长内是否接收到所述接口返回的所述目标代码；
如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常；
如果在所述预设时长内所述接口返回的代码与所述目标代码不同，则确定所述接口异常；
如果在所述预设时长内未接收到所述接口返回的代码，则确定所述接口异常；
如果确定所述接口异常，将接口信息、输入参数、接口地址、实际输出参数、相关日志信息进行打包，并发送至相关工作人员。
7.一种基于模拟用户测试的监控装置，其特征在于，所述装置包括：
第一设置单元，用于根据接口的重要程度为所述接口设置测试周期；
第二设置单元，用于根据所述接口的功能为所述接口设置输入参数；
第一生成单元，用于每隔所述测试周期，根据所述输入参数生成请求命令，所述请求命令用于对所述接口进行模拟用户测试；
执行单元，用于执行所述请求命令，对所述接口进行模拟用户测试，其中，在所述接口正常的情况下，所述接口在预设时长内返回目标代码；
判断单元，用于判断在所述预设时长内是否接收到所述接口返回的所述目标代码；
第一确定单元，用于如果在所述预设时长内接收到所述接口返回的所述目标代码，则确定所述接口正常。
8.根据权利要求7所述的装置，其特征在于，所述装置还包括：
搭建单元，用于在所述第一生成单元根据所述输入参数生成请求命令之前，使用jmeter+ant+jenkins搭建自动化测试框架，
第二生成单元，用于在所述第一确定单元确定所述接口正常之后，生成所述接口的测试报告，
所述第一设置单元用于：在jmeter中根据接口的重要程度为所述接口设置所述测试周期，
新建单元，用于在所述第一生成单元根据所述输入参数生成请求命令之前，新建配置文件；
配置单元，用于在所述配置文件中配置jmeter的安装路径、测试报告存放路径、测试报告命名规范、jmeter测试脚本存放路径。
9.根据权利要求7所述的装置，其特征在于，所述装置还包括：
获取单元，用于在所述判断单元判断在所述预设时长内是否接收到所述接口返回的所述目标代码之前，获取所述接口的多个历史响应时长；
第二确定单元，用于根据所述接口的所述多个历史响应时长确定所述预设时长。
10.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时控制所述存储介质所在设备执行权利要求1至6中任意一项所述的基于模拟用户测试的监控方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2018112687107 | 2018-10-29 | ||
| CN201811268710 | 2018-10-29 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109597729A true CN109597729A (zh) | 2019-04-09 |
Family
ID=65960246
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811389196.2A Pending CN109597729A (zh) | 2018-10-29 | 2018-11-21 | 一种基于模拟用户测试的监控方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109597729A (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110109826A (zh) * | 2019-04-12 | 2019-08-09 | 平安普惠企业管理有限公司 | 针对接口的线上预警方法及相关装置 |
| CN110109827A (zh) * | 2019-04-12 | 2019-08-09 | 平安普惠企业管理有限公司 | 针对页面的线上预警方法及相关装置 |
| CN110224870A (zh) * | 2019-06-19 | 2019-09-10 | 腾讯云计算（北京）有限责任公司 | 接口监控方法、装置、计算设备及存储介质 |
| CN111124370A (zh) * | 2019-12-24 | 2020-05-08 | 深圳我家云网络科技有限公司 | 一种数据处理方法及相关设备 |
| CN111290968A (zh) * | 2020-03-19 | 2020-06-16 | 上海异势信息科技有限公司 | 一种自动测试的实现方法、装置、设备和存储介质 |
| WO2021027422A1 (zh) * | 2019-08-12 | 2021-02-18 | 珠海格力电器股份有限公司 | 基于数据收集的接口服务功能监测方法及系统 |
| CN113535506A (zh) * | 2020-04-21 | 2021-10-22 | 上海际链网络科技有限公司 | 服务系统的监控方法及装置、存储介质、计算机设备 |
| CN117251382A (zh) * | 2023-11-17 | 2023-12-19 | 北京安锐卓越信息技术股份有限公司 | 一种自动化性能压测周期执行方法及装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104360920A (zh) * | 2014-12-02 | 2015-02-18 | 微梦创科网络科技（中国）有限公司 | 一种接口自动化测试方法及装置 |
| US20170271027A1 (en) * | 2016-03-21 | 2017-09-21 | International Business Machines Corporation | Methods and systems of testing interfaces of computer storage for storage vulnerabilities |
| CN107729243A (zh) * | 2017-10-12 | 2018-02-23 | 上海携程金融信息服务有限公司 | 应用编程接口自动化测试方法、系统、设备及存储介质 |
| CN107977308A (zh) * | 2016-10-25 | 2018-05-01 | 传化物流集团有限公司 | 接口测试方法及装置 |
| US20180285247A1 (en) * | 2017-03-29 | 2018-10-04 | The Travelers Indemnity Company | Systems, methods, and apparatus for automated code testing |
-
2018
- 2018-11-21 CN CN201811389196.2A patent/CN109597729A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104360920A (zh) * | 2014-12-02 | 2015-02-18 | 微梦创科网络科技（中国）有限公司 | 一种接口自动化测试方法及装置 |
| US20170271027A1 (en) * | 2016-03-21 | 2017-09-21 | International Business Machines Corporation | Methods and systems of testing interfaces of computer storage for storage vulnerabilities |
| CN107977308A (zh) * | 2016-10-25 | 2018-05-01 | 传化物流集团有限公司 | 接口测试方法及装置 |
| US20180285247A1 (en) * | 2017-03-29 | 2018-10-04 | The Travelers Indemnity Company | Systems, methods, and apparatus for automated code testing |
| CN107729243A (zh) * | 2017-10-12 | 2018-02-23 | 上海携程金融信息服务有限公司 | 应用编程接口自动化测试方法、系统、设备及存储介质 |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110109826A (zh) * | 2019-04-12 | 2019-08-09 | 平安普惠企业管理有限公司 | 针对接口的线上预警方法及相关装置 |
| CN110109827A (zh) * | 2019-04-12 | 2019-08-09 | 平安普惠企业管理有限公司 | 针对页面的线上预警方法及相关装置 |
| CN110224870A (zh) * | 2019-06-19 | 2019-09-10 | 腾讯云计算（北京）有限责任公司 | 接口监控方法、装置、计算设备及存储介质 |
| CN110224870B (zh) * | 2019-06-19 | 2023-03-24 | 腾讯云计算（北京）有限责任公司 | 接口监控方法、装置、计算设备及存储介质 |
| WO2021027422A1 (zh) * | 2019-08-12 | 2021-02-18 | 珠海格力电器股份有限公司 | 基于数据收集的接口服务功能监测方法及系统 |
| CN111124370A (zh) * | 2019-12-24 | 2020-05-08 | 深圳我家云网络科技有限公司 | 一种数据处理方法及相关设备 |
| CN111124370B (zh) * | 2019-12-24 | 2024-04-26 | 深圳我家云网络科技有限公司 | 一种数据处理方法及相关设备 |
| CN111290968A (zh) * | 2020-03-19 | 2020-06-16 | 上海异势信息科技有限公司 | 一种自动测试的实现方法、装置、设备和存储介质 |
| CN113535506A (zh) * | 2020-04-21 | 2021-10-22 | 上海际链网络科技有限公司 | 服务系统的监控方法及装置、存储介质、计算机设备 |
| CN117251382A (zh) * | 2023-11-17 | 2023-12-19 | 北京安锐卓越信息技术股份有限公司 | 一种自动化性能压测周期执行方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109597729A (zh) | 一种基于模拟用户测试的监控方法和装置 | |
| KR101908467B1 (ko) | 가시화된 네트워크 운영 및 유지를 위한 방법 및 장치 | |
| US7783744B2 (en) | Facilitating root cause analysis for abnormal behavior of systems in a networked environment | |
| CN108989136B (zh) | 业务端到端性能监控方法及装置 | |
| US8849965B2 (en) | Wireless network performance monitoring | |
| CN106878064A (zh) | 数据监控方法和装置 | |
| WO2014116936A2 (en) | Methods and systems for detecting, locating and remediating a congested resource or flow in a virtual infrastructure | |
| CN110535945A (zh) | 存储集群告警功能的测试方法、装置、设备及存储介质 | |
| CN110196800A (zh) | 分布式事务测试方法、装置及系统 | |
| CN106209515A (zh) | 接入网设备自动化测试系统 | |
| CN107172648A (zh) | 一种网络测试方法及设备 | |
| CN112241350A (zh) | 微服务评估方法、装置、计算设备及微服务检测系统 | |
| De Carvalho et al. | A cloud monitoring framework for self-configured monitoring slices based on multiple tools | |
| CN102916846B (zh) | 监控方法及系统 | |
| CN109783260A (zh) | 智能it全流程运维方法、装置、设备及可读存储介质 | |
| CN104144084B (zh) | 终端状态的监控方法及装置 | |
| CN104794039B (zh) | 服务软件的远程监测方法和装置 | |
| CN101141329A (zh) | 一种实现连通性检测的方法和系统 | |
| CN113726808A (zh) | 一种网站监测方法、装置、设备及存储介质 | |
| CN108322524A (zh) | 一种负载均衡设备会话保持测试方法及装置 | |
| CN112468336B (zh) | 一种网络质量监测预警方法、装置、终端及存储介质 | |
| CN112383342B (zh) | 卫星通信链路监测方法、装置和存储介质 | |
| CN113079070B (zh) | 一种域名系统的响应性能监测方法及装置 | |
| CN110278105A (zh) | 基于zabbix和web拨测检测整体业务运行质量的方法 | |
| KR100500836B1 (ko) | 매트로 이더넷망의 장애처리 장치 및 그 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| AD01 | Patent right deemed abandoned | ||
| AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20231208 |