CN115333920A - 告警测试的方法、装置、电子设备及计算机可读存储介质 - Google Patents
告警测试的方法、装置、电子设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN115333920A CN115333920A CN202210968712.7A CN202210968712A CN115333920A CN 115333920 A CN115333920 A CN 115333920A CN 202210968712 A CN202210968712 A CN 202210968712A CN 115333920 A CN115333920 A CN 115333920A
- Authority
- CN
- China
- Prior art keywords
- website
- tested
- target
- alarm
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 157
- 230000002159 abnormal effect Effects 0.000 claims abstract description 73
- 230000004044 response Effects 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims abstract description 38
- 238000004590 computer program Methods 0.000 claims description 13
- 230000005856 abnormality Effects 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 12
- 238000001514 detection method Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000012544 monitoring process Methods 0.000 description 8
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 239000000047 product Substances 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 239000006227 byproduct Substances 0.000 description 1
- 235000014510 cooky Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000246 remedial effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
- H04L63/083—Network architectures or network communication protocols for network security for authentication of entities using passwords
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Debugging And Monitoring (AREA)
- Test And Diagnosis Of Digital Computers (AREA)
Abstract
本申请属于测试技术领域，公开了告警测试的方法、装置、电子设备及计算机可读存储介质，该方法包括，周期性向多个待测网站下发测试任务；远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；将目标待测网站与异常待测网站进行比对，获得告警测试结果。这样，可以批量对多个待测网站进行任务测试，减少了耗费的人力成本和时间成本，解决了如何进行告警测试的问题。
Description
技术领域
本申请涉及测试技术领域，具体而言，涉及告警测试的方法、装置、电子设备及计算机可读存储介质。
背景技术
随着互联网的快速发展，网络安全形势日趋严峻，尤其各行企业用户的门户网站，这些成千上万的网站使用性极高、数量极多。若出现网站被停用或者网络断开的问题而不能及时进行异常告警以便及时进行修复，会造成严重的后果。因此，通常采用人工下发测试任务的方式，测试网站服务器是否能够正常提供网站服务，并在确定服务异常时进行告警，以进行网站检测以及异常告警。
但是，由于在网站检测以及异常告警的过程中，可能存在告警遗漏或者告警误报的问题，因此，如何测试告警的准确率，是一个需要解决的技术问题。
发明内容
本申请实施例的目的在于提供告警测试的方法、装置、电子设备及计算机可读存储介质，用以在进行网站异常检测以及异常告警时，解决如何测试告警的准确率的问题。
一方面，提供一种告警测试的方法，包括：
周期性向多个待测网站下发测试任务；
远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；
根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；
对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；
将目标待测网站与异常待测网站进行比对，获得告警测试结果。
在上述实现过程中，可以批量对多个待测网站进行任务测试，减少了耗费的人力成本和时间成本，解决了如何进行告警测试的问题。
一种实施方式中，在周期性向多个待测网站下发测试任务之前，方法还包括：
获取多个网站信息；
调用网站创建接口，基于各网站信息，分别创建每一待测网站。
在上述实现过程中，可以批量创建待测网站，减少了耗费的人力成本和时间成本。
一种实施方式中，远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务，包括：
若目标待测网站为多个，则从各待测网站中，选取多个目标待测网站；
获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的；
基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器；
通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
在上述实现过程中，可以批量控制网站服务器停止网站服务，减少了耗费的人力成本和时间成本。
一种实施方式中，根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站，包括：
接收各待测网站基于测试任务返回的测试响应消息；
获取各测试响应消息中的目标字段；
针对各测试响应消息中的目标测试响应消息，若确定目标测试响应消息中的目标字段符合设定异常条件，则确定目标测试响应消息对应的待测网站存在服务异常；目标测试响应消息为各测试响应消息中的任意一个。
在上述实现过程中，确定存在服务异常时，自动触发告警。
一种实施方式中，将目标待测网站与异常待测网站进行比对，获得告警测试结果，包括：
确定目标待测网站中包含的异常待测网站的正确告警数量；
确定目标待测网站的总数量；
根据正确告警数量与总数量之间的比值，获得告警准确率，告警测试结果包括告警准确率。
在上述实现过程中，可以确定告警准确率。
一方面，提供一种告警测试的装置，包括：
发送单元，用于周期性向多个待测网站下发测试任务；
控制单元，用于远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；
确定单元，用于根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；
告警单元，用于对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；
比对单元，用于将目标待测网站与异常待测网站进行比对，获得告警测试结果。
一种实施方式中，发送单元还用于：
获取多个网站信息；
调用网站创建接口，基于各网站信息，分别创建每一待测网站。
一种实施方式中，控制单元用于：
若目标待测网站为多个，则从各待测网站中，选取多个目标待测网站；
获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的；
基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器；
通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
一种实施方式中，确定单元用于：
接收各待测网站基于测试任务返回的测试响应消息；
获取各测试响应消息中的目标字段；
针对各测试响应消息中的目标测试响应消息，若确定目标测试响应消息中的目标字段符合设定异常条件，则确定目标测试响应消息对应的待测网站存在服务异常；目标测试响应消息为各测试响应消息中的任意一个。
一种实施方式中，比对单元用于：
确定目标待测网站中包含的异常待测网站的正确告警数量；
确定目标待测网站的总数量；
根据正确告警数量与总数量之间的比值，获得告警准确率，告警测试结果包括告警准确率。
一方面，提供了一种电子设备，包括处理器以及存储器，存储器存储有计算机可读取指令，当计算机可读取指令由处理器执行时，运行如上述任一种告警测试的各种可选实现方式中提供的方法的步骤。
一方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时运行如上述任一种告警测试的各种可选实现方式中提供的方法的步骤。
一方面，提供了一种计算机程序产品，计算机程序产品在计算机上运行时，使得计算机执行如上述任一种告警测试的各种可选实现方式中提供的方法的步骤。
本申请的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本申请实施例提供的一种告警测试的方法的流程图；
图2为本申请实施例提供的一种告警测试的装置的结构框图；
图3为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
首先对本申请实施例中涉及的部分用语进行说明，以便于本领域技术人员理解。
终端设备：可以是移动终端、固定终端或便携式终端，例如移动手机、站点、单元、设备、多媒体计算机、多媒体平板、互联网节点、通信器、台式计算机、膝上型计算机、笔记本计算机、上网本计算机、平板计算机、个人通信系统设备、个人导航设备、个人数字助理、音频/视频播放器、数码相机/摄像机、定位设备、电视接收器、无线电广播接收器、电子书设备、游戏设备或者其任意组合，包括这些设备的配件和外设或者其任意组合。还可预见到的是，终端设备能够支持任意类型的针对用户的接口(例如可穿戴设备)等。
服务器：可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务以及大数据和人工智能平台等基础云计算服务的云服务器。
为了在进行网站异常检测以及异常告警时，可以解决如何测试告警的准确率的问题，本申请实施例提供了告警测试的方法、装置、电子设备及计算机可读存储介质。
参阅图1所示，为本申请实施例提供的一种告警测试的方法的流程图，应用于电子设备，该方法的具体实施流程如下：
步骤100：周期性向多个待测网站下发测试任务；步骤101：远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；步骤102：根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；步骤103：对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；步骤104：将目标待测网站与异常待测网站进行比对，获得告警测试结果。
可选的，电子设备可以为服务器也可以为终端设备，作为一个示例，电子设备为安全云服务平台。
一种实施方式中，采用自动平台登录工具，调用平台登录接口(如，安全云服务平台登录接口)，获取平台登录参数，并基于平台登录参数登录安全云服务平台。
可选的，平台登录参数可以为以下至少一个：用户名、密码、动态获取的认证数据(Cookie)。自动平台登录工具可以为Jmeter工具。
一种实施方式中，为实现批量网站测试，降低人工成本和时间成本，提高网站测试效率，步骤100的实现过程还可以包括：获取多个网站信息，并调用网站创建接口，基于各网站信息，分别创建每一待测网站。
可选的，网站信息为用于创建网站所需要的信息，可以包括以下至少一个：网站名称、网站统一资源定位符(Uniform Resource Locator，URL)、互联网协议(InternetProtocol，IP)地址，以及经纬度。
一种实施方式中，采用网站信息文件预先存储多个网站信息(如，上千个)，并将各网站信息进行统一存储和管理，以及将各网站信息中的各字段进行参数化，以便后续接口调用。
作为一个示例，网站信息文件可以为逗号分隔值(Comma-Separated Values，CSV)。
一种实施方式中，循环执行以下步骤：调用网站创建接口，读取网站信息文件中的一个目标网站信息，并基于目标网站信息，创建待测网站。
作为一个示例，在JMeter中通过超文本传输协议(Hyper Text TransportProtocol，HTTP)请求，调用安全云服务平台的网站创建接口，逐行循环读取CSV组件中的每一条网站信息并创建待测网站，以成功创建待测网站。
这样，通过网站创建接口，只需1人/1-2s左右，就可以成功创建一个待测网站，而采用人工的方式，通常1人/10-15s左右创建一个待测网站，显然，这极大地提升了测试效率和数据的准确性。
需要说明的是，本申请实施例中，由于需要创建模拟测试的环境，因此，需要创建多个待测网站，还可以直接向多个已有的待测网站下发测试任务，在此不作限制。
一种实施方式中，为提高任务测试的效率，步骤100的实现过程可以包括：
通过Http请求，调用任务测试接口，同时或者循环向各待测网站发送测试任务。
作为一个示例，通过正式表式组件，读取待测网站的网站标识(Identification，ID)，并通过循环控制器，控制任务测试接口依次获取新的待测网站ID，并向新的待测网站ID对应的待测网站，发送测试任务。
可选的，测试任务可以为可用性任务，即测试待测网站是否可用。
这样，通过动态获取的网站ID，不断向下一个待测网站发送猜测是任务。
这样，将网站ID作为变量参数，就可以通过接口的形式自动下发上千个可用性任务，以达到模拟多人同时下发测试任务的场景。
一种实施方式中，若目标待测网站为一个，则执行步骤101的实现过程可以包括：从各待测网站中，选取一个目标待测网站，并获取该目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，以及，基于该服务器信息远程登录目标待测网站对应的网站服务器，并通过建立的远程登录连接，向该目标网站的网站服务器发送对应的服务停止命令，使得该网站服务器停止该目标待测网站的网站服务。
一种实施方式中，为模拟网站服务停止的场景，执行步骤101的实现过程可以包括：
S1011：若目标待测网站为多个，则从各待测网站中，选取多个目标待测网站。
作为一个示例，将所有待测网站，确定为目标待测网站。
S1012：获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令。
其中，服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的。也就是说，不同网站服务器的服务停止命令可能是相同的，也可能是不同的。
一种实施方式中，各待测网站分别部署于多种中间件的网站服务器内，由于服务器所在的中间件的不同，因此，不同网站服务器的服务停止命令可能是相同的，也可能是不同的。
可选的，中间件可以为以下至少一种：tomcat、IIS、Nginx以及Apache。
作为一个示例，通过CSV管理网站服务器，将网站信息与服务停止命令(如，Command)关联存储到CSV文件中，并将网站信息和服务停止命令参数化，以便后续接口调用。
S1013：基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器。
一种实施方式中，调用远程登录工具，基于安全外壳协议(Network WorkingGroup，SSH)协议，获取各服务器信息，并基于服务器信息，远程登录各网站服务器。
需要说明的是，同一网站服务器可以对应一个或多个目标待测网站。
S1014：通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
作为一个示例，采用SSH Protocol Support和SSH Mon Sample Collector插件，通过循环控制器添加ssh command取样器组件，并通过ssh command取样器组件循环逐行读取CSV文件中的服务器信息，以及采用登录方式，基于服务器系信息远程连接网站服务器，并远程控制网站服务器成功执行服务停止命令，从而控制网站服务器自动停止待测网站的网站服务。
这样，就可以模拟人工操作实现批量停止待测网站。
步骤100和步骤101只需1人/3-4s左右就可以成功执行一次，而采用人工方式创建待测网站好、下发测试任务以及停止网站服务，1人/30-40s左右，因此，可以节省大量的人力成本和时间成本，并且可以在短时间内有效的提升测试速度和测试准确性。
一种实施方式中，为提高服务异常检测的准确度，步骤102的实现过程可以包括：
S1021：接收各待测网站基于测试任务返回的测试响应消息。
S1022：获取各测试响应消息中的目标字段。
可选的，目标字段可以包括以下参数中的至少一个：
非200、标题、检测项状态、响应类型、响应大小、响应时间、套接字(socket)连接、域名系统(Domain Name System，DNS)解析时间、http协议版本、DNS解析IP以及协议方法。
S1023：针对各测试响应消息中的目标测试响应消息，若确定目标测试响应消息中的目标字段符合设定异常条件，则确定目标测试响应消息对应的待测网站存在服务异常。
其中，目标测试响应消息为各测试响应消息中的任意一个。设定异常条件可以根据实际应用场景进行设置，如，若目标测试响应消息中包含包含非200，则确定网站服务异常(如，待测网站不可服务)。
一种实施方式中，为进行及时告警，步骤103的实现过程可以包括：
确定待测网站的服务异常时，触发针对服务异常的待测网站的告警，并统计告警成功的异常待测网站。
作为一个示例，当某一网站服务器被判定为不可达状态时，安全云服务平台自动触发可用性告警。
可选的，异常告警可以发送给指定用户(如网站维护人员或网站管理人员)，还可以发送到监控设备中。
其中，异常告警的发送方式可以包括以下方式中的至少一种：
邮件(Email)、短信、应用程序(Application，APP)微信、企业微信以及电话。
一种实施方式中，为进行告警测试，步骤104的实现过程可以包括：
S1041：确定目标待测网站中包含的异常待测网站的正确告警数量。
S1042：确定目标待测网站的总数量；
S1043：根据正确告警数量与总数量之间的比值，获得告警准确率。
其中，告警测试结果包括告警准确率。
进一步的，还可以根据预先设置的研判规则策略，对异常告警进行有效性检测，确定异常告警为有效告警还是无效告警。无效告警是指误报的告警。
进一步的，还可以根据无效告警的数量与总数量之间的比值，获得告警误报率。
进一步的，还可以基于异常告警，实时或周期性生成网站监测报告，使得用户可以实时查询网站监测报告。
进一步的，网站监测报告可以按日报、周报、月报、年报等维度生成，可以存储或者下载，还可以按机构、按网站、按标签等维度查询统计，以方便用户随时查看待测网站的可用性情况。
这样，就可以通过网站监测报告，查看一段时间内(如，7*24小时)，对待测网站的持续监测和全面漏洞检测。如，可以包含本检测周期(如，1天)内的网站中断和截止时间，以及，可以统计共产生过几次异常告警，以及，还可以累计中断时长多少分钟等。进而使得专家团队可以根据网站监测报告分析评估待测网站的安全级别，并给出建议和补救方案。
本申请实施例中，可以批量创建多个待测网站，并可以批量向各待测网站发送测试任务，不需要人工操作，减少了人力成本和时间成本，使得网站测试过程直观明了，再者，可以批量向不同的网站服务器发送不同的停止命令，控制各网站服务器停止用户指定的各待测网站的网站服务，从而可以模拟批量的网站异常场景，进而可以通过测试任务的检测结果，触发异常告警，不需要人工连接各网站服务器执行停止命令，还可以识别有效告警以及无效告警，还可以确定告警准确率，解决了无法测试告警准确率的问题，以便及时通知用户进行网站维护，实现了网站服务的安全监测，进一步的，提高测试效率，进而能够缩短产品上线周期，减小因产品延期造成的风险，能够快速迭代产品版本，促进产品快速成熟。
基于同一发明构思，本申请实施例中还提供了一种告警测试的装置，由于上述装置及设备解决问题的原理与一种告警测试的方法相似，因此，上述装置的实施可以参见方法的实施，重复之处不再赘述。
如图2所示，其为本申请实施例提供的一种告警测试的装置的结构示意图，包括：
发送单元201，用于周期性向多个待测网站下发测试任务；
控制单元202，用于远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；
确定单元203，用于根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；
告警单元204，用于对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；
比对单元205，用于将目标待测网站与异常待测网站进行比对，获得告警测试结果。
一种实施方式中，发送单元201还用于：
获取多个网站信息；
调用网站创建接口，基于各网站信息，分别创建每一待测网站。
一种实施方式中，控制单元202用于：
若目标待测网站为多个，则从各待测网站中，选取多个目标待测网站；
获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的；
基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器；
通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
一种实施方式中，确定单元203用于：
接收各待测网站基于测试任务返回的测试响应消息；
获取各测试响应消息中的目标字段；
针对各测试响应消息中的目标测试响应消息，若确定目标测试响应消息中的目标字段符合设定异常条件，则确定目标测试响应消息对应的待测网站存在服务异常；目标测试响应消息为各测试响应消息中的任意一个。
一种实施方式中，比对单元205用于：
确定目标待测网站中包含的异常待测网站的正确告警数量；
确定目标待测网站的总数量；
根据正确告警数量与总数量之间的比值，获得告警准确率，告警测试结果包括告警准确率。
本申请实施例提供的告警测试的方法、装置、电子设备及计算机可读存储介质中，周期性向多个待测网站下发测试任务；远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；根据各待测网站基于测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；对存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；将目标待测网站与异常待测网站进行比对，获得告警测试结果。这样，可以批量对多个待测网站进行任务测试，减少了耗费的人力成本和时间成本，解决了如何进行告警测试的问题。
图3示出了一种电子设备3000的结构示意图。参阅图3所示，电子设备3000包括：处理器3010以及存储器3020，可选的，还可以包括电源3030、显示单元3040、输入单元3050。
处理器3010是电子设备3000的控制中心，利用各种接口和线路连接各个部件，通过运行或执行存储在存储器3020内的软件程序和/或数据，执行电子设备3000的各种功能，从而对电子设备3000进行整体监控。
本申请实施例中，处理器3010调用存储器3020中存储的计算机程序时执行上述实施例中的各个步骤。
可选的，处理器3010可包括一个或多个处理单元；优选的，处理器3010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器3010中。在一些实施例中，处理器、存储器、可以在单一芯片上实现，在一些实施例中，它们也可以在独立的芯片上分别实现。
存储器3020可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、各种应用等；存储数据区可存储根据电子设备3000的使用所创建的数据等。此外，存储器3020可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件等。
电子设备3000还包括给各个部件供电的电源3030(比如电池)，电源可以通过电源管理系统与处理器3010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗等功能。
显示单元3040可用于显示由用户输入的信息或提供给用户的信息以及电子设备3000的各种菜单等，本发明实施例中主要用于显示电子设备3000中各应用的显示界面以及显示界面中显示的文本、图片等对象。显示单元3040可以包括显示面板3041。显示面板3041可以采用液晶显示屏(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置。
输入单元3050可用于接收用户输入的数字或字符等信息。输入单元3050可包括触控面板3051以及其他输入设备3052。其中，触控面板3051，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触摸笔等任何适合的物体或附件在触控面板3051上或在触控面板3051附近的操作)。
具体的，触控面板3051可以检测用户的触摸操作，并检测触摸操作带来的信号，将这些信号转换成触点坐标，发送给处理器3010，并接收处理器3010发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板3051。其他输入设备3052可以包括但不限于物理键盘、功能键(比如音量控制按键、开关机按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
当然，触控面板3051可覆盖显示面板3041，当触控面板3051检测到在其上或附近的触摸操作后，传送给处理器3010以确定触摸事件的类型，随后处理器3010根据触摸事件的类型在显示面板3041上提供相应的视觉输出。虽然在图3中，触控面板3051与显示面板3041是作为两个独立的部件来实现电子设备3000的输入和输出功能，但是在某些实施例中，可以将触控面板3051与显示面板3041集成而实现电子设备3000的输入和输出功能。
电子设备3000还可包括一个或多个传感器，例如压力传感器、重力加速度传感器、接近光传感器等。当然，根据具体应用中的需要，上述电子设备3000还可以包括摄像头等其它部件，由于这些部件不是本申请实施例中重点使用的部件，因此，在图3中没有示出，且不再详述。
本领域技术人员可以理解，图3仅仅是电子设备的举例，并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件。
本申请实施例中，一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时，使得通信设备可以执行上述实施例中的各个步骤。
为了描述的方便，以上各部分按照功能划分为各模块(或单元)分别描述。当然，在实施本申请时可以把各模块(或单元)的功能在同一个或多个软件或硬件中实现。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。
Claims (12)
1.一种告警测试的方法，其特征在于，包括：
周期性向多个待测网站下发测试任务；
远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；
根据各待测网站基于所述测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；
对所述存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；
将所述目标待测网站与所述异常待测网站进行比对，获得告警测试结果。
2.如权利要求1所述的方法，其特征在于，在所述周期性向多个待测网站下发测试任务之前，所述方法还包括：
获取多个网站信息；
调用网站创建接口，基于各网站信息，分别创建每一待测网站。
3.如权利要求1所述的方法，其特征在于，所述远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务，包括：
若所述目标待测网站为多个，则从各待测网站中，选取多个目标待测网站；
获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，所述服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的；
基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器；
通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
4.如权利要求1-3任一项所述的方法，其特征在于，所述根据各待测网站基于所述测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站，包括：
接收各待测网站基于所述测试任务返回的测试响应消息；
获取各测试响应消息中的目标字段；
针对各测试响应消息中的目标测试响应消息，若确定所述目标测试响应消息中的目标字段符合设定异常条件，则确定所述目标测试响应消息对应的待测网站存在服务异常；所述目标测试响应消息为各测试响应消息中的任意一个。
5.如权利要求1-3任一项所述的方法，其特征在于，所述将所述目标待测网站与所述异常待测网站进行比对，获得告警测试结果，包括：
确定所述目标待测网站中包含的异常待测网站的正确告警数量；
确定所述目标待测网站的总数量；
根据所述正确告警数量与所述总数量之间的比值，获得告警准确率，所述告警测试结果包括所述告警准确率。
6.一种告警测试的装置，其特征在于，包括：
发送单元，用于周期性向多个待测网站下发测试任务；
控制单元，用于远程控制网站服务器停止各待测网站中的至少一个目标待测网站的网站服务；
确定单元，用于根据各待测网站基于所述测试任务返回的测试响应消息，确定各待测网站中存在服务异常的待测网站；
告警单元，用于对所述存在服务异常的待测网站进行异常告警，获得告警成功的异常待测网站；
比对单元，用于将所述目标待测网站与所述异常待测网站进行比对，获得告警测试结果。
7.如权利要求6所述的装置，其特征在于，所述发送单元还用于：
获取多个网站信息；
调用网站创建接口，基于各网站信息，分别创建每一待测网站。
8.如权利要求6所述的装置，其特征在于，所述控制单元用于：
若所述目标待测网站为多个，则从各待测网站中，选取多个目标待测网站；
获取各目标待测网站各自对应的网站服务器的服务器信息和服务停止命令，所述服务停止命令是根据网站服务器的系统语言环境以及网站服务生成的；
基于各服务器信息，分别远程登录每一目标待测网站对应的网站服务器；
通过与各网站服务器之间的远程登录连接，向各目标网站的网站服务器发送对应的服务停止命令，使得各网站服务器停止各自对应的目标待测网站的网站服务。
9.如权利要求6-8任一项所述的装置，其特征在于，所述确定单元用于：
接收各待测网站基于所述测试任务返回的测试响应消息；
获取各测试响应消息中的目标字段；
针对各测试响应消息中的目标测试响应消息，若确定所述目标测试响应消息中的目标字段符合设定异常条件，则确定所述目标测试响应消息对应的待测网站存在服务异常；所述目标测试响应消息为各测试响应消息中的任意一个。
10.如权利要求6-8任一项所述的装置，其特征在于，所述比对单元用于：
确定所述目标待测网站中包含的异常待测网站的正确告警数量；
确定所述目标待测网站的总数量；
根据所述正确告警数量与所述总数量之间的比值，获得告警准确率，所述告警测试结果包括所述告警准确率。
11.一种电子设备，其特征在于，包括处理器以及存储器，所述存储器存储有计算机可读取指令，当所述计算机可读取指令由所述处理器执行时，运行如权利要求1-5任一所述方法。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时运行如权利要求1-5任一所述方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210968712.7A CN115333920B (zh) | 2022-08-12 | 2022-08-12 | 告警测试的方法、装置、电子设备及计算机可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210968712.7A CN115333920B (zh) | 2022-08-12 | 2022-08-12 | 告警测试的方法、装置、电子设备及计算机可读存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115333920A true CN115333920A (zh) | 2022-11-11 |
| CN115333920B CN115333920B (zh) | 2024-04-23 |
Family
ID=83923406
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210968712.7A Active CN115333920B (zh) | 2022-08-12 | 2022-08-12 | 告警测试的方法、装置、电子设备及计算机可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115333920B (zh) |
Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030217283A1 (en) * | 2002-05-20 | 2003-11-20 | Scott Hrastar | Method and system for encrypted network management and intrusion detection |
| CN103067214A (zh) * | 2011-10-19 | 2013-04-24 | 阿里巴巴集团控股有限公司 | 用于测试网站性能的方法、客户端、服务器和系统 |
| US20140189714A1 (en) * | 2012-10-10 | 2014-07-03 | Webtrends Inc. | Methods and automated systems for testing, optimization, and analysis that preserve continuity in identities and status of users who access remote information from different contexts |
| CN104506541A (zh) * | 2014-12-29 | 2015-04-08 | 北京奇虎科技有限公司 | 网站漏洞告警方法及装置 |
| US20150181171A1 (en) * | 2013-12-24 | 2015-06-25 | Kt Corporation | Interactive and targeted monitoring service |
| CN107528749A (zh) * | 2017-08-28 | 2017-12-29 | 杭州安恒信息技术有限公司 | 基于云防护日志的网站可用性检测方法、装置及系统 |
| CN107707427A (zh) * | 2017-09-28 | 2018-02-16 | 南华大学 | 一种网站可用性监控系统及方法 |
| CN107888452A (zh) * | 2017-11-24 | 2018-04-06 | 成都知道创宇信息技术有限公司 | 一种24小时分布式网站性能监测和实时告警方法 |
| CN109240874A (zh) * | 2017-07-05 | 2019-01-18 | 北京国双科技有限公司 | 网站页面异常检测方法、装置及系统 |
| CN110535945A (zh) * | 2019-08-30 | 2019-12-03 | 苏州浪潮智能科技有限公司 | 存储集群告警功能的测试方法、装置、设备及存储介质 |
| US20200036790A1 (en) * | 2018-07-26 | 2020-01-30 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and apparatus for service hosting of distributed storage system |
| CN111049679A (zh) * | 2019-12-02 | 2020-04-21 | 深圳市智微智能软件开发有限公司 | 服务器的告警方法及系统 |
| CN111698121A (zh) * | 2020-06-10 | 2020-09-22 | 浪潮商用机器有限公司 | 一种SNMP trap告警测试方法及相关装置 |
| CN111796978A (zh) * | 2020-06-29 | 2020-10-20 | 苏州好玩友网络科技有限公司 | 一种接口检测方法、装置、系统、设备及存储介质 |
| CN112507270A (zh) * | 2020-12-11 | 2021-03-16 | 杭州安恒信息技术股份有限公司 | 基于云防护中标题逃逸的网站篡改告警方法及相关装置 |
| CN112583669A (zh) * | 2020-12-11 | 2021-03-30 | 北京字节跳动网络技术有限公司 | 线上链路压力测试方法、装置、电子设备及介质 |
| CN114610560A (zh) * | 2020-12-07 | 2022-06-10 | 腾讯科技（深圳）有限公司 | 系统异常监控方法、装置和存储介质 |
-
2022
- 2022-08-12 CN CN202210968712.7A patent/CN115333920B/zh active Active
Patent Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030217283A1 (en) * | 2002-05-20 | 2003-11-20 | Scott Hrastar | Method and system for encrypted network management and intrusion detection |
| CN103067214A (zh) * | 2011-10-19 | 2013-04-24 | 阿里巴巴集团控股有限公司 | 用于测试网站性能的方法、客户端、服务器和系统 |
| US20140189714A1 (en) * | 2012-10-10 | 2014-07-03 | Webtrends Inc. | Methods and automated systems for testing, optimization, and analysis that preserve continuity in identities and status of users who access remote information from different contexts |
| US20150181171A1 (en) * | 2013-12-24 | 2015-06-25 | Kt Corporation | Interactive and targeted monitoring service |
| CN104506541A (zh) * | 2014-12-29 | 2015-04-08 | 北京奇虎科技有限公司 | 网站漏洞告警方法及装置 |
| CN109240874A (zh) * | 2017-07-05 | 2019-01-18 | 北京国双科技有限公司 | 网站页面异常检测方法、装置及系统 |
| CN107528749A (zh) * | 2017-08-28 | 2017-12-29 | 杭州安恒信息技术有限公司 | 基于云防护日志的网站可用性检测方法、装置及系统 |
| CN107707427A (zh) * | 2017-09-28 | 2018-02-16 | 南华大学 | 一种网站可用性监控系统及方法 |
| CN107888452A (zh) * | 2017-11-24 | 2018-04-06 | 成都知道创宇信息技术有限公司 | 一种24小时分布式网站性能监测和实时告警方法 |
| US20200036790A1 (en) * | 2018-07-26 | 2020-01-30 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and apparatus for service hosting of distributed storage system |
| CN110535945A (zh) * | 2019-08-30 | 2019-12-03 | 苏州浪潮智能科技有限公司 | 存储集群告警功能的测试方法、装置、设备及存储介质 |
| CN111049679A (zh) * | 2019-12-02 | 2020-04-21 | 深圳市智微智能软件开发有限公司 | 服务器的告警方法及系统 |
| CN111698121A (zh) * | 2020-06-10 | 2020-09-22 | 浪潮商用机器有限公司 | 一种SNMP trap告警测试方法及相关装置 |
| CN111796978A (zh) * | 2020-06-29 | 2020-10-20 | 苏州好玩友网络科技有限公司 | 一种接口检测方法、装置、系统、设备及存储介质 |
| CN114610560A (zh) * | 2020-12-07 | 2022-06-10 | 腾讯科技（深圳）有限公司 | 系统异常监控方法、装置和存储介质 |
| CN112507270A (zh) * | 2020-12-11 | 2021-03-16 | 杭州安恒信息技术股份有限公司 | 基于云防护中标题逃逸的网站篡改告警方法及相关装置 |
| CN112583669A (zh) * | 2020-12-11 | 2021-03-30 | 北京字节跳动网络技术有限公司 | 线上链路压力测试方法、装置、电子设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115333920B (zh) | 2024-04-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2017504121A (ja) | 端末デバイスにおけるユーザインタフェースを用いたユーザ行動および関与の計測機 | |
| CN104765678A (zh) | 对移动终端设备上的应用进行测试的方法及装置 | |
| US20160283356A1 (en) | Event-driven automation testing for mobile devices | |
| CN112261118A (zh) | 多媒体数据的异常检测方法、终端及服务器 | |
| CN107168844B (zh) | 一种性能监控的方法及装置 | |
| CN111198797B (zh) | 操作监控方法及装置、操作分析方法及装置 | |
| CN104579830A (zh) | 服务监控方法及装置 | |
| CN112463588A (zh) | 一种自动化测试系统及方法、存储介质、计算设备 | |
| CN111654495B (zh) | 用于确定流量产生来源的方法、装置、设备及存储介质 | |
| CN105553770B (zh) | 一种数据采集控制方法和装置 | |
| US9195374B1 (en) | Automated statistical graphing tool | |
| CN112882948A (zh) | 一种应用的稳定性测试方法、装置、系统及存储介质 | |
| CN115705190A (zh) | 依赖程度的确定方法及装置 | |
| CN113362173A (zh) | 防重机制验证方法、验证系统、电子设备及存储介质 | |
| CN116662193A (zh) | 页面测试方法和装置 | |
| CN115333920B (zh) | 告警测试的方法、装置、电子设备及计算机可读存储介质 | |
| CN113726612B (zh) | 一种获取测试数据的方法、装置、电子设备及存储介质 | |
| CN114510305B (zh) | 模型训练方法、装置、存储介质及电子设备 | |
| US10169216B2 (en) | Simulating sensors | |
| CN110795330A (zh) | 一种Monkey压力测试的方法和装置 | |
| CN110633182B (zh) | 用于监控服务器稳定性的系统、方法和装置 | |
| CN113923000B (zh) | 一种安全处理方法、装置、电子设备、及存储介质 | |
| CN112084114B (zh) | 用于测试接口的方法和装置 | |
| CN111371745B (zh) | 用于确定ssrf漏洞的方法和装置 | |
| CN113110976A (zh) | 一种异常分析的方法、装置、电子设备及可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |