CN111953556B - 网站自动拨测方法、装置、计算机设备及可读存储介质 - Google Patents

网站自动拨测方法、装置、计算机设备及可读存储介质 Download PDF

Info

Publication number
CN111953556B
CN111953556B CN202010625071.6A CN202010625071A CN111953556B CN 111953556 B CN111953556 B CN 111953556B CN 202010625071 A CN202010625071 A CN 202010625071A CN 111953556 B CN111953556 B CN 111953556B
Authority
CN
China
Prior art keywords
dial
website
testing
url
tested
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010625071.6A
Other languages
English (en)
Other versions
CN111953556A (zh
Inventor
张强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Unihub China Information Technology Co Ltd
Original Assignee
Unihub China Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Unihub China Information Technology Co Ltd filed Critical Unihub China Information Technology Co Ltd
Priority to CN202010625071.6A priority Critical patent/CN111953556B/zh
Publication of CN111953556A publication Critical patent/CN111953556A/zh
Application granted granted Critical
Publication of CN111953556B publication Critical patent/CN111953556B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/45—Network directories; Name-to-address mapping
    • H04L61/4505—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例提供了一种网站自动拨测方法、装置、计算机设备及可读存储介质，其中，该方法包括：查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储待拨测域名的待拨测的网站URL；针对每个待拨测的网站URL，接收拨测参数，根据拨测参数生成每个待拨测的网站URL的拨测指令，下发拨测指令；调用到达拨测时间的拨测指令对待拨测的网站URL进行拨测；针对每个待拨测的网站URL，接收每次拨测的返回信息，记录返回信息中的状态码。该方案有利于减少维护人员的工作量，有利于提高拨测效率；有利于贴近真实业务环境，灵活拨测URL；有利于提高拨测结果的准确性。

Description

网站自动拨测方法、装置、计算机设备及可读存储介质
技术领域
本发明涉及网站维护技术领域，特别涉及一种网站自动拨测方法、装置、计算机设备及可读存储介质。
背景技术
现有技术中，网站拨测的常规解决方案流程如下：
1、网站查找
人工从网站访问活跃资源里提取域名，如随机选取100个域名。然后手工逐个做域名解析，拿到单点且IP落在本机房内的网站URL(Uniform Resource Locator，统一资源定位符)。
2、网站URL可用性验证
人工对上一步选取的100个域名逐一验证，方法为解析域名选取单点IP且IP归属于对应机房的。在可用域名前加上http://或https://形成URL。
3、新增URL监测指令
人工新增URL监测指令，生效时间为长期有效。
4、下发URL监测指令
下发URL监测指令到对应机房，记录下发状态。
5、定时拨测网站
每天固定三个时间使用开源的ab工具分别拨测网站3000次，共访问网站9000次。
6、统计拨测结果
人工每天统计前一天拨测的结果，导出成excel表格存档。
7、拨测网站URL资源更新
如连续几天同一个URL拨测均访问失败，需要人工重新查找更新网站URL资源。
上述常规解决方案存在以下缺陷：
1、人工操作复杂繁琐，大量时间花费在查找可用网站URL、统计拨测结果、URL资源更新上，每天重复性工作，维护人员工作负担大，工作效率低。
2、URL监测指令为长期有效，每天固定三个时间拨测，使得脱离真实业务环境，拨测URL固化，不能动态探测现网各种网站资源。
3、手工执行开源ab工具拨测时不能直观识别返回拨测的各类状态码，ab工具认为只要有返回的状态码就表示此条拨测是complete的，只会记录complete数量；而EU设备认为只有返回状态码为200的才是成功访问，这样会出现ab工具拨测成功数量大于EU上报的数据，如果发现这种问题也只能记录，无法处理，下次仍有可能再次出现，且这时就无法判定为网站问题还是EU上报数据的问题，使得拨测结果数据不准确，无法为网站运维提供有效的参考数据。
发明内容
本发明实施例提供了一种网站自动拨测方法，以解决现有技术中网站拨测存在的人员工作量大、效率低、拨测URL固化、拨测结果数据不准确的技术问题。该方法包括：
查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
本发明实施例还提供了一种网站自动拨测装置，以解决现有技术中网站拨测存在的人员工作量大、效率低、拨测URL固化、拨测结果数据不准确的技术问题。该装置包括：
查找模块，用于查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
拨测指令生成模块，用于针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
拨测模块，用于调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
信息记录模块，用于针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述任意的网站自动拨测方法，以解决现有技术中网站拨测存在的人员工作量大、效率低、拨测URL固化、拨测结果数据不准确的技术问题。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述任意的网站自动拨测方法的计算机程序，以解决现有技术中网站拨测存在的人员工作量大、效率低、拨测URL固化、拨测结果数据不准确的技术问题。
在本发明实施例中，提出了通过程序实现上述网站自动拨测方法，程序自动查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；进而通过程序接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备；再通过程序调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测，最后，针对每个所述待拨测的网站URL，自动接收每次拨测的返回信息，并记录返回信息中不同的状态码。实现了通过程序自动实现网站域名查找、指令生成、指令下发、自动拨测并记录状态码等过程，与现有技术相比，避免或减少了人工操作，有利于减少维护人员的工作量，有利于提高拨测效率，也有利于避免或减少人工操作带来的数据错误等现象；同时，可以接收针对每个所述待拨测的网站URL输入的拨测参数，并根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，使得不同的所述待拨测的网站URL可以各自对应不同的拨测参数，可以根据每个待拨测的网站URL的特点、特征灵活设置不同的拨测参数，进而灵活进行不同的拨测，与现有技术中所有URL固定化、统一拨测相比，上述网站自动拨测方法可以有利于贴近真实业务环境，灵活拨测URL，有利于动态探测现网各种网站资源；此外，可以记录返回信息中不同的状态码，使得可以区分每次拨测返回的状态码类别，进而可以确定每次拨测是成功还是其他拨测结果，与现有技术相比，使得可以避免无法统计拨测成功数量或拨测成功数量大于EU上报的数据等情况，有利于提高拨测结果数据的准确性，有利于为网站运维提供有效的参考数据。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，并不构成对本发明的限定。在附图中：
图1是本发明实施例提供的一种网站自动拨测方法的流程图；
图2是本发明实施例提供的一种查找网站URL的流程示意图；
图3是本发明实施例提供的一种各机房日志准确率结果示意图；
图4是本发明实施例提供的一种计算机设备的结构框图；
图5是本发明实施例提供的一种网站自动拨测装置的结构框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，下面结合实施方式和附图，对本发明做进一步详细说明。在此，本发明的示意性实施方式及其说明用于解释本发明，但并不作为对本发明的限定。
在本发明实施例中，提供了一种网站自动拨测方法，如图1所示，该方法包括：
步骤102：查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
步骤104：针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
步骤106：调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
步骤108：针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
由图1所示的流程可知，在本发明实施例中，提出了通过程序实现上述网站自动拨测方法，程序自动查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；进而通过程序接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备；再通过程序调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测，最后，针对每个所述待拨测的网站URL，自动接收每次拨测的返回信息，并记录返回信息中不同的状态码。实现了通过程序自动实现网站域名查找、指令生成、指令下发、自动拨测并记录状态码等过程，与现有技术相比，避免或减少了人工操作，有利于减少维护人员的工作量，有利于提高拨测效率，也有利于避免或减少人工操作带来的数据错误等现象；同时，可以接收针对每个所述待拨测的网站URL输入的拨测参数，并根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，使得不同的所述待拨测的网站URL可以各自对应不同的拨测参数，可以根据每个待拨测的网站URL的特点、特征灵活设置不同的拨测参数，进而灵活进行不同的拨测，与现有技术中所有URL固定化、统一拨测相比，上述网站自动拨测方法可以有利于贴近真实业务环境，灵活拨测URL，有利于动态探测现网各种网站资源；此外，可以记录返回信息中不同的状态码，使得可以区分每次拨测返回的状态码类别，进而可以确定每次拨测是成功还是其他拨测结果，与现有技术相比，使得可以避免无法统计拨测成功数量或拨测成功数量大于EU上报的数据等情况，有利于提高拨测结果数据的准确性，有利于为网站运维提供有效的参考数据。
具体实施时，在查找属于各个机房的网站域名的过程，可以机房为维度在前一天活跃域名中查找到符合要求的网站域名，可供查找网站域名的数据源字段有机房、网站域名、网站IP、首次访问时间、最后访问时间、访问次数等。
具体实施时，为了进一步提高拨测结果的准确性、更能反馈系统问题及隐患，在本实施例中，可以根据不同网站的特性或特点有针对性地查找符合查找参数的网站域名，例如，可以接收输入的查找参数，进而根据所述查找参数查找属于各个机房的网站域名，其中，所述查找参数包括IP地址范围、访问时间范围、访问次数、协议类型以及网站层级中的任意一项或任意项组合。具体的，可以接收不同的查找参数，例如，针对社交网站，在社交频繁时段内则可以接收查找参数，根据访问量等参数查找社交类的网站域名；针对购物网站，在年底或购物节期间，则可以接收查找参数来查找购物类的网站域名。
具体实施时，针对不同的网站或查找需求，上述查找参数可以包括不同的参数，例如，IP地址范围，即查找选定IP地址范围内的网站域名；访问时间范围，即查找选定访问时间范围内的网站域名；访问次数，例如，topN或给定访问次数范围等，即查找符合访问次数的网站域名；协议类型，如http或https协议等，即查找符合协议类型的网站域名；网站层级，如可配置1层、2层、3层等，即查找符合网站层级的网站域名；查找参数除了可以包括上述参数，还可以包括查找域名的数量等参数，查找参数可根据需要随时做变更、调整。通过上述查找参数的输入、配置，使得可以有针对性地访问次数topN或访问次数排名靠后的一些网站域名，可以使得http和https协议网站分开拨测，还可以使得拨测不同网站层级可验证网站不同WEB服务器运行情况、不同类型网站在不同时间段访问量差异等。
具体实施时，在判断、获取待拨测域名的过程中，如图2所示，可以每次查找获得一个符合查找参数(图2中查找参数以访问数量小于100为例)的网站域名，使用nslookup解析网站域名为IP，首先判断解析出来一个还是多个IP，若解析出来多个IP，则排除该网站域名，若解析出来一个IP时，判断此IP是否在系统中对应机房IP地址段内，当在对应机房IP地址段内时获取到此网站域名，作为待拨测域名，如不在对应机房IP地址段内则继续循环查找到下一个网站域名，重复执行nsloopup并判断IP是否单点及是否在对应机房IP地址段内，直到获取到有效的待拨测域名。随后程序测试验证待拨测域名为http或https协议网站，对应地在域名添加http://或https://协议即为待拨测的网站URL。
具体实施时，为了进一步提高拨测的准确性，避免重复拨测，在本实施例中，存储所述待拨测域名的待拨测的网站URL，包括：
针对每个所述待拨测的网站URL，判断所述待拨测的网站URL是否与目前已经存储的待拨测的网站URL重复，若否，则存储所述待拨测的网站URL。即在将待拨测的网站URL存入数据库的过程中，通过查重的方式确保每天查找到的网站URL不重复。
具体实施时，为了有利于拨测贴近真实业务环境，灵活拨测URL，提高拨测的及时性、准确性，在本实施例中，提出了可以针对每个待拨测的网站URL，接收输入的拨测参数，使得不同的待拨测的网站URL根据不同的拨测参数进行拨测。具体的，可以将拨测参数加上对应的机房编号、待拨测的网站URL等信息生成每个待拨测的网站URL的配置信息，各个待拨测的网站URL的配置信息可以形成配置文件，进而根据每个待拨测的网站URL的拨测参数生成每个待拨测的网站URL的拨测指令，如待拨测的网站URL的拨测指令可以包括待拨测的网站URL、拨测并发数以及拨测次数等，进而生成指令表。例如，把每个机房查找到的网站URL写入数据库指令表，同时新增对应机房编号、拨测有效期的生效时间、拨测有效期的失效时间、数据入库时间、拨测时间、指令下发时间等参数。拨测有效期可以根据不同需求设置不同的时长，例如，拨测有效期可以为24小时，拨测时间可以是任意不同的时间点，以便在拨测有效期内拨测时间上对网站URL进行拨测。
具体实施时，还可以通过程序自动在系统中新增拨测指令(信息从指令表中取得)。生成拨测指令后，可以按照指令下发时间下发拨测指令，如读取配置文件里配置的指令下发时间，到了指令下发时间自动把拨测指令下发给对应机房的EU设备进行拨测。根据EU返回ACK结果自动判断本次拨测指令下发是否成功，如失败，继续重试下发二次，如仍然失败，则写入对应数据库表标记对应机房的拨测指令下发失败。以便维护人员根据指令下发状态表，对于下发失败的记录进行人工排查原因及解决。
具体实施时，当所有拨测指令下发成功后等待5分钟(EU设备加载指令需要时间)，自动并发启动拨测程序，多个机房可以同时拨测不同的网站URL，拨测程序在启动时会读取指令表中的拨测参数，每个机房拨测次数可配置为不同。
具体实施时，为了便于准确地区分拨测结果为成功还是其他，通过拨测程序在特定日志记录每条拨测记录的返回信息，并明确记录返回信息中不同的状态码，如200、404等状态码。
为了提供有效的拨测结果，在本实施例中，对拨测结果进行统计，以便为运维提供直观、准确的参考数据，例如，针对每个所述待拨测的网站URL，根据每个拨测时间的返回信息，统计所述待拨测的网站URL的拨测总数，根据每个拨测时间记录的返回信息中不同的状态码，统计各类状态码的数量，统计每个所述待拨测的网站URL的拨测成功率。例如，拨测结束后汇总统计本次拨测返回的各类状态码，比如，200状态码多少次，404状态码多少次等，拨测总数(该拨测总数不包括拨测失败)是多少。
具体的，拨测完毕后，可以记录本次拨测总次数、拨测成功次数、拨测失败次数、拨测开始时间、拨测结束时间、拨测的网站URL、机房编号等数据，生成拨测结果表，例如，拨测结果表可以包括以下数据项：
PolicyID为拨测策略的编号；
HouseID填写为该策略生效的机房；
CompleteRequests填写为该策略总拨测数量；
SucceedRequests填写为该策略拨测成功的数量；
StartTime为拨测开始时间；
endTime为拨测结束时间；
isCheck可以不填写；
Comments可以不填写。
其中的PolicyID、HouseID、StartTime、endTime可以根据实际情况填写，SucceedNumber可以填写为0，isCheck可以不填写，Comments可以填写为拨测失败。
具体实施时，拨测完成后等待3分钟，拨测程序可以根据拨测源IP、拨测时间段、拨测URL条件自动统计EU设备上报的日志数量，把此日志数量除以拨测成功次数即可得到拨测成功率。
具体实施时，针对拨测异常情况的处理，拨测时如发现异常情况，拨测程序不返回执行结果，如拒绝访问等，在程序看来为结果中找不到需要的关键字，则认为拨测失败，在数据库中可以增加一条记录。
具体实施时，为了进一步提高拨测的动态、灵活性，在本实施例中，拨测有效期结束时，删除拨测成功率符合预设值的所述待拨测的网站URL的拨测指令，不再继续拨测这些网站URL；针对拨测成功率未符合所述预设值的所述待拨测的网站URL，延期至下一个拨测有效期继续进行拨测。
具体的，例如，上述预设值可以为数值范围，如95％-105％的数值范围，针对每个网站URL，如图3所示，拨测有效期以1天为例，如该网站URL的拨测成功率符合预设值，则为合格，则删除该网站URL的拨测指令，该机房第二天重新查找新的网站URL入指令表；如该网站URL的拨测成功率未符合预设值，则不合格，不删除指令表中该网站URL的拨测指令，该机房第二天继续对当前的网站URL进行拨测，直到拨测结果合格为止。具体的，当存在不合格的网站URL时，该机房第二天可以不重新查找网站URL继续沿用当前不合格的网站URL进行拨测，或者，该机房第二天可以重新查找网站URL，对重新查找的网站URL和沿用当前的网站URL进行拨测，可灵活配置机房第二天是否重新查找网站URL。指令表可以仅仅包括当天需要下发的拨测指令，针对同一个机房一天之内可以拨测同一个URL或者拨测多个URL，可分多个时间段拨测。
具体实施时，现有技术每天从一台拨测服务器的固定几个工作时间点使用开源ab工具拨测网站，因为地域问题，在拨测服务器所在的省内可以正常拨测网站，换一个省份再拨测同一个网站可能就不行，另外，如果拨测服务器在非工作时间段出现问题，也无法及时反馈给运维人员。因此，为了进一步提高拨测的实用性和时效性，及时发现问题及隐患，保证系统稳定运行，可以通过分布在多个不同省份的多台拨测服务器(如阿里云、腾讯云等)自定义拨测时间点自动进行拨测，拨测时间点可分别在工作时间、非工作时间、网站峰值、网站谷值等以便长时间监测网站运营状况，解决目前手工拨测无法实现的目标。
在本实施例中，提供了一种计算机设备，如图4所示，包括存储器402、处理器404及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述任意的网站自动拨测方法。
具体的，该计算机设备可以是计算机终端、服务器或者类似的运算装置。
在本实施例中，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述任意的网站自动拨测方法的计算机程序。
具体的，计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机可读存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读存储介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
基于同一发明构思，本发明实施例中还提供了一种网站自动拨测装置，如下面的实施例所述。由于网站自动拨测装置解决问题的原理与网站自动拨测方法相似，因此网站自动拨测装置的实施可以参见网站自动拨测方法的实施，重复之处不再赘述。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图5是本发明实施例的网站自动拨测装置的一种结构框图，如图5所示，该装置包括：
查找模块502，用于查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
拨测指令生成模块504，用于针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
拨测模块506，用于调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
信息记录模块508，用于针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
在一个实施例中，查找模块，包括：
查找单元，用于接收输入的查找参数，根据所述查找参数查找属于各个机房的网站域名，其中，所述查找参数包括IP地址范围、访问时间范围、访问次数、协议类型以及网站层级中的任意一项或任意项组合。
在一个实施例中，查找模块，包括：
存储单元，用于针对每个所述待拨测的网站URL，判断所述待拨测的网站URL是否与目前已经存储的待拨测的网站URL重复，若否，则存储所述待拨测的网站URL。
在一个实施例中，还包括：
统计模块，用于针对每个所述待拨测的网站URL，根据每个拨测时间的返回信息，统计所述待拨测的网站URL的拨测总数，根据每个拨测时间记录的返回信息中不同的状态码，统计各类状态码的数量，统计每个所述待拨测的网站URL的拨测成功率。
在一个实施例中，还包括：
指令整理模块，用于拨测有效期结束时，删除拨测成功率符合预设值的所述待拨测的网站URL的拨测指令；针对拨测成功率未符合所述预设值的所述待拨测的网站URL，延期至下一个拨测有效期继续进行拨测。
本发明实施例实现了如下技术效果：提出了通过程序实现上述网站自动拨测方法，程序自动查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；进而通过程序接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备；再通过程序调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测，最后，针对每个所述待拨测的网站URL，自动接收每次拨测的返回信息，并记录返回信息中不同的状态码。实现了通过程序自动实现网站域名查找、指令生成、指令下发、自动拨测并记录状态码等过程，与现有技术相比，避免或减少了人工操作，有利于减少维护人员的工作量，有利于提高拨测效率，也有利于避免或减少人工操作带来的数据错误等现象；同时，可以接收针对每个所述待拨测的网站URL输入的拨测参数，并根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，使得不同的所述待拨测的网站URL可以各自对应不同的拨测参数，可以根据每个待拨测的网站URL的特点、特征灵活设置不同的拨测参数，进而灵活进行不同的拨测，与现有技术中所有URL固定化、统一拨测相比，上述网站自动拨测方法可以有利于贴近真实业务环境，灵活拨测URL，有利于动态探测现网各种网站资源；此外，可以记录返回信息中不同的状态码，使得可以区分每次拨测返回的状态码类别，进而可以确定每次拨测是成功还是其他拨测结果，与现有技术相比，使得可以避免无法统计拨测成功数量或拨测成功数量大于EU上报的数据等情况，有利于提高拨测结果数据的准确性，有利于为网站运维提供有效的参考数据。
显然，本领域的技术人员应该明白，上述的本发明实施例的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明实施例不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种网站自动拨测方法，其特征在于，包括：
查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
2.如权利要求1所述的网站自动拨测方法，其特征在于，查找属于各个机房的网站域名，包括：
接收输入的查找参数，根据所述查找参数查找属于各个机房的网站域名，其中，所述查找参数包括IP地址范围、访问时间范围、访问次数、协议类型以及网站层级中的任意一项或任意项组合。
3.如权利要求1所述的网站自动拨测方法，其特征在于，存储所述待拨测域名的待拨测的网站URL，包括：
针对每个所述待拨测的网站URL，判断所述待拨测的网站URL是否与目前已经存储的待拨测的网站URL重复，若否，则存储所述待拨测的网站URL。
4.如权利要求1至3中任一项所述的网站自动拨测方法，其特征在于，还包括：
针对每个所述待拨测的网站URL，根据每个拨测时间的返回信息，统计所述待拨测的网站URL的拨测总数，根据每个拨测时间记录的返回信息中不同的状态码，统计各类状态码的数量，统计每个所述待拨测的网站URL的拨测成功率。
5.如权利要求4所述的网站自动拨测方法，其特征在于，还包括：
拨测有效期结束时，删除拨测成功率符合预设值的所述待拨测的网站URL的拨测指令；针对拨测成功率未符合所述预设值的所述待拨测的网站URL，延期至下一个拨测有效期继续进行拨测。
6.一种网站自动拨测装置，其特征在于，包括：
查找模块，用于查找属于各个机房的网站域名，判断出域名解析为单个IP且IP在所属机房的IP地址段内的网站域名为待拨测域名，获取并存储所述待拨测域名的待拨测的网站URL；
拨测指令生成模块，用于针对每个所述待拨测的网站URL，接收输入的拨测参数，根据所述拨测参数生成每个所述待拨测的网站URL的拨测指令，并将拨测指令下发给所述待拨测的网站URL所属机房的EU设备，其中，所述拨测参数包括拨测时间、拨测有效期、拨测并发数以及拨测次数；
拨测模块，用于调用到达拨测时间的拨测指令对所述待拨测的网站URL进行拨测；
信息记录模块，用于针对每个所述待拨测的网站URL，接收每次拨测的返回信息，并记录返回信息中不同的状态码。
7.如权利要求6所述的网站自动拨测装置，其特征在于，查找模块，包括：
查找单元，用于接收输入的查找参数，根据所述查找参数查找属于各个机房的网站域名，其中，所述查找参数包括IP地址范围、访问时间范围、访问次数、协议类型以及网站层级中的任意一项或任意项组合。
8.如权利要求6所述的网站自动拨测装置，其特征在于，查找模块，包括：
存储单元，用于针对每个所述待拨测的网站URL，判断所述待拨测的网站URL是否与目前已经存储的待拨测的网站URL重复，若否，则存储所述待拨测的网站URL。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述的网站自动拨测方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至5中任一项所述的网站自动拨测方法的计算机程序。
CN202010625071.6A 2020-07-02 2020-07-02 网站自动拨测方法、装置、计算机设备及可读存储介质 Active CN111953556B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010625071.6A CN111953556B (zh) 2020-07-02 2020-07-02 网站自动拨测方法、装置、计算机设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010625071.6A CN111953556B (zh) 2020-07-02 2020-07-02 网站自动拨测方法、装置、计算机设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN111953556A CN111953556A (zh) 2020-11-17
CN111953556B true CN111953556B (zh) 2021-09-17

Family

ID=73337891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010625071.6A Active CN111953556B (zh) 2020-07-02 2020-07-02 网站自动拨测方法、装置、计算机设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN111953556B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113065078B (zh) * 2021-03-16 2022-11-11 赛尔新技术（北京）有限公司 模拟用户行为拨测web网站多级域名的统计分析方法
CN113068216B (zh) * 2021-03-17 2023-06-27 牙木科技股份有限公司 网络拨测方法、网络拨测系统及计算机可读存储介质
CN114760235B (zh) * 2022-04-24 2024-03-22 青岛海尔科技有限公司 拨测任务的执行方法及装置、存储介质、电子装置
CN115967613B (zh) * 2022-12-20 2024-10-01 广州骏伯网络科技有限公司 一种自适应性页面拨测告警方法、装置、设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109672658B (zh) * 2018-09-25 2022-01-21 平安科技（深圳）有限公司 Json劫持漏洞的检测方法、装置、设备及存储介质
CN109684210A (zh) * 2018-12-18 2019-04-26 宁夏隆基宁光仪表股份有限公司 一种网站自动化测试方法、装置、设备及可读存储介质
CN110011875B (zh) * 2019-04-11 2023-03-03 深圳前海微众银行股份有限公司 拨测方法、装置、设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN111953556A (zh) 2020-11-17

Similar Documents

Publication Publication Date Title
CN111953556B (zh) 网站自动拨测方法、装置、计算机设备及可读存储介质
CN108197200A (zh) 日志追踪方法、装置、计算机设备和存储介质
CN104298588A (zh) 一种持续集成的实现方法及装置
CN112035415B (zh) 针对用户访问数据的处理系统、方法、设备及存储介质
CN112487083B (zh) 一种数据校验方法和设备
CN109614284B (zh) 一种数据处理方法及装置
CN107832446B (zh) 一种配置项信息的搜索方法及计算设备
CN110750443B (zh) 网页测试的方法、装置、计算机设备及存储介质
CN111382069A (zh) 一种数据流测试方法及系统
CN106326280A (zh) 数据处理方法、装置及系统
CN106708648B (zh) 一种文本数据的存储校验方法和系统
CN112256984B (zh) 一种网页对应的接口托底截图的获取方法及设备
CN117829896A (zh) 一种基于大数据的供应链拓客方法、设备及存储介质
CN104317820B (zh) 报表的统计方法和装置
CN111435327B (zh) 一种日志记录的处理方法、装置及系统
US20180089004A1 (en) Classification of application events using call stacks
CN109360618A (zh) 一种电子化试验报告的管理方法及系统
CN114465926A (zh) 递归服务器监测方法、装置、设备及存储介质
CN111309623B (zh) 一种坐标类数据分类测试方法及装置
CN111127065B (zh) 用户职住地的获取方法和装置
CN112363944A (zh) 一种用于多环境接口返回值对比的方法及设备
CN110807037B (zh) 一种数据修改方法、装置、电子设备及存储介质
CN110020348B (zh) 圈选事件的预警方法及装置
US20160328441A1 (en) Search token mnemonic replacement
CN117251384B (zh) 一种接口自动化测试用例生成方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: 201804 Room 702-2, No. 4811, Cao'an Highway, Jiading District, Shanghai

Patentee after: CHINA UNITECHS

Address before: Room 1004-4, 10 / F, 1112 Hanggui Road, Anting Town, Jiading District, Shanghai, 201804

Patentee before: CHINA UNITECHS