CN116962242A - 网页故障识别方法、装置、设备及计算机存储介质 - Google Patents

网页故障识别方法、装置、设备及计算机存储介质 Download PDF

Info

Publication number
CN116962242A
CN116962242A CN202211418115.3A CN202211418115A CN116962242A CN 116962242 A CN116962242 A CN 116962242A CN 202211418115 A CN202211418115 A CN 202211418115A CN 116962242 A CN116962242 A CN 116962242A
Authority
CN
China
Prior art keywords
webpage
resource data
web page
blocking
dpi
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211418115.3A
Other languages
English (en)
Inventor
刘艺蕾
韩萍
张小强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Group Shanxi Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Group Shanxi Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Group Shanxi Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202211418115.3A priority Critical patent/CN116962242A/zh
Publication of CN116962242A publication Critical patent/CN116962242A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/02—Capturing of monitoring data
    • H04L43/028—Capturing of monitoring data by filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/09—Mapping addresses
    • H04L61/10—Mapping addresses of different types
    • H04L61/103—Mapping addresses of different types across network layers, e.g. resolution of network layer into physical layer addresses or address resolution protocol [ARP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请公开了一种网页故障识别方法、装置、设备及计算机存储介质，涉及人工智能技术领域。网页故障识别方法包括：获取第一网页的资源数据，第一网页为异常网页；利用资源数据执行第一操作，得到第一网页的故障类型；其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作。根据本申请实施例，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。

Description

网页故障识别方法、装置、设备及计算机存储介质
技术领域
本申请属于人工智能领域，尤其涉及一种网页故障识别方法、装置、设备及计算机存储介质。
背景技术
随着千兆宽带和5G的大规模落地，以网页(web)应用为主要形式的网络服务已成为现代社会不可或缺的重要组成部分，保障网络服务的正常运行并有良好的服务质量十分关键。
目前，主要是通过技术人员利用命令和抓包工具进行各种测试，然后综合各种测试结果和运维经验进行网页故障的识别。
上述方式中，网页故障的判断和定位受技术人员的专业水平影响，对技术人员的要求高，且准确性难以保证，同时，技术人员需要结合各种命令、抓包工具和系统进行人工判断，网页故障的识别效率低。
发明内容
本申请实施例提供一种网页故障识别方法、装置、设备及计算机存储介质，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
第一方面，本申请实施例提供一种网页故障识别方法，方法包括：
获取第一网页的资源数据，第一网页为异常网页；
利用资源数据执行第一操作，得到第一网页的故障类型；
其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作。
第二方面，本申请实施例提供了一种网页故障识别装置，装置包括：
第一获取模块，用于获取第一网页的资源数据，第一网页为异常网页；
执行模块，用于利用资源数据执行第一操作，得到第一网页的故障类型；
其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作和DPI封堵检测操作。
第三方面，本申请实施例提供了一种电子设备，设备包括：
处理器以及存储有计算机程序指令的存储器；
所述处理器执行所述计算机程序指令时实现如第一方面所述的网页故障识别方法。
第四方面，本申请实施例提供了一种计算机存储介质，所述计算机可读存储介质上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现如第一方面所述的网页故障识别方法。
第五方面，本申请实施例提供了一种计算机程序产品，所述计算机程序产品中的指令由电子设备的处理器执行时，使得所述电子设备执行如第一方面所述的网页故障识别方法。
本申请实施例提供了一种网页故障识别方法、装置、设备及计算机存储介质，该方法包括：获取第一网页的资源数据，利用资源数据执行第一操作，得到第一网页的故障类型，其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单的介绍，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请提供的网页故障识别方法的实施例的流程示意图；
图2是本申请提供的网页故障识别装置的实施例的结构示意图；
图3是本申请提供的电子设备的实施例的结构示意图。
具体实施方式
下面将详细描述本申请的各个方面的特征和示例性实施例，为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及具体实施例，对本申请进行进一步详细描述。应理解，此处所描述的具体实施例仅意在解释本申请，而不是限定本申请。对于本领域技术人员来说，本申请可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本申请的示例来提供对本申请更好的理解。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
在阐述本申请实施例所提供的技术方案之前，为了便于对本申请实施例理解，本申请首先对专业名词进行具体说明。
域名(Domain Name)，是由一串用点分隔的名字组成的Internet上某一台计算机或计算机组的名称，用于在数据传输时标识计算机的电子方位(有时也指地理位置，地理上的域名，指代有行政自主权的一个地方区域)。
DNS(Domain Name System，域名系统)，是建立在分布式数据库上的分层命名系统。该系统将域名转换为IP地址，并可以将域名分配给Internet组资源和用户，无论实体的物理位置如何。
DPI系统通常是指运营商的网络通道中的互联网流量监控、分析管理的系统，由硬件和软件组成。
源站，源头的站点，上级服务器，也是用户的源站主机地址。
为了解决现有技术问题，本申请实施例提供了一种网页故障识别方法、装置、设备及计算机存储介质。下面首先对本申请实施例所提供的网页故障识别方法进行介绍。
图1示出了本申请提供的网页故障识别方法的实施例的流程示意图。
本申请实施例提供的网页故障识别方法，可以应用于电子设备。如图1所示，本申请实施例提供的网页故障识别方法包括以下步骤S101至步骤S102。
S101、获取第一网页的资源数据，第一网页为异常网页。
S102、利用资源数据执行第一操作，得到第一网页的故障类型，其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作。
本申请实施例提供了一种网页故障识别方法，该方法包括：获取第一网页的资源数据，利用资源数据执行第一操作，得到第一网页的故障类型，其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
下面介绍上述各个步骤的具体实现方式。
在S101中，电子设备可以利用浏览器对Go语言的支持，通过Go语言获取第一网页的资源数据。Go语言是Google开发的一种静态强类型、编译型、并发型，并具有垃圾回收功能的编程语言。
第一网页为异常网页，可以理解为，第一网页为出现异常的网页。
第一网页的资源数据可以包括第一网页的响应状态码、元素数量、各个元素对应的元素大小及网页显示界面截图等。
响应状态码可以是用于表示网页服务器响应状态的代码。
第一网页的元素可以包括文字、图片、音频和视频等。
在S102中，电子设备在获取第一网页的资源数据之后，利用资源数据执行第一操作，得到第一网页的故障类型。其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作。
在一些可选的实施方式中，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
将资源数据输入网络诊断模型，得到第一网页的故障类型；
其中，网络诊断模型利用资源数据执行第一操作，得到第一网页的故障类型。
在本实施方式中，通过将资源数据输入网络诊断模型，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
在一些可选的实施方式中，在第一操作包括DNS解析操作的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
依次执行第一解析操作、第二解析操作和第三解析操作中的至少一项，得到目标解析结果；
在目标解析结果为第三解析操作的解析结果为解析失败的情况下，确定第一网页的故障类型为第二解析异常；
在目标解析结果为第三解析操作的解析结果为解析成功的情况下，确定第一网页的故障类型为域名无法解析；
其中，第i解析操作的执行条件是：第i-1解析操作的解析结果为解析失败，i等于2或3；第一解析操作为运营商DNS解析操作，第二解析操作为本地DNS解析操作，第三解析操作为权威DNS解析操作。
在本实施方式中，通过利用资源数据执行DNS解析操作，根据目标解析结果，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
目标解析结果可以包括第一解析操作的解析结果为解析成功、第二解析操作的解析结果为解析成功，第三解析操作的解析结果为解析成功及第三解析操作的解析结果为解析失败。
示例性的，电子设备执行运营商DNS解析操作，在运营商DNS解析操作的解析结果为解析失败的情况下，电子设备继续执行本地DNS解析操作。在运营商DNS解析操作的解析结果为解析失败的情况下，电子设备继续执行权威DNS解析操作。在目标解析结果为权威DNS解析操作的解析结果解析失败的情况下，确定第一网页的故障类型为域名无法解析；在目标解析结果为权威DNS解析操作的解析结果为解析成功的情况下，确定第一网页的故障类型为本地DNS解析异常。
在一些可选的实施方式中，在第一操作包括域名封堵检测操作的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行域名封堵检测操作，得到域名封堵检测结果；
在域名封堵检测结果为非DNS安全封堵域名的情况下，确定第一网页的故障类型为域名封堵。
在本实施方式中，通过利用资源数据执行DNS解析操作，根据域名封堵检测结果，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
域名封堵检测结果可以包括DNS安全封堵域名和非DNS安全封堵域名。
示例性的，可以通过将电子设备与DNS封堵系统电连接，进而电子设备可以从DNS封堵系统中获取DNS安全封堵域名名单，将资源数据中的相关域名与DNS安全封堵域名名单进行比对。在DNS安全封堵域名名单中包括该资源数据中的相关域名的情况下，确定域名封堵检测结果为DNS安全封堵域名；在DNS安全封堵域名名单中不包括该资源数据中的相关域名的情况下，确定域名封堵检测结果为非DNS安全封堵域名。
可选的，在目标解析结果为第一解析操作的解析结果为解析成功，或目标解析结果为第二解析操作的解析结果为解析成功的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行域名封堵检测操作，得到域名封堵检测结果；
在域名封堵检测结果为非DNS安全封堵域名的情况下，确定第一网页的故障类型为域名封堵。
示例性的，在运营商DNS解析操作的解析结果为解析成功，或运营商DNS解析操作的解析结果为解析失败但本地DNS解析操作的解析结果为解析成功的情况下，电子设备继续利用资源数据执行域名封堵检测操作，得到域名封堵检测结果。在域名封堵检测结果为非DNS安全封堵域名的情况下，确定第一网页的故障类型为域名封堵。这样，能够进一步自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
在一些可选的实施方式中，在第一操作包括网络连通性检测操作的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行网络连通性检测操作，得到网络连通性检测结果；
在网络连通性检测结果为检测异常的情况下，确定第一网页的故障类型为网络协议地址异常。
在本实施方式中，通过利用资源数据执行网络连通性检测操作，根据网络连通性检测结果，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
可选的，利用资源数据执行网络连通性检测操作，得到网络连通性检测结果，可以包括：
利用资源数据，依次执行第一测试操作、第二测试操作和第三测试操作中的至少一项，得到网络连通性检测结果；
其中，第i测试操作的执行条件是：第i-1测试操作的测试结果为测试失败，i等于2或3；第一测试操作为ping测试操作，第二测试操作为Tcping测试操作，第三测试操作为Tracert测试操作。
ping测试操作用于检测网络是否连通。
Tcping测试操作用于检测网络具体端口的连通性。
Tracert测试操作用于检测网络协议(Internet Protocol，IP)数据包访问目标所采取的路径。
示例性的，电子设备利用资源数据，先执行ping测试操作。在ping测试操作的测试结果为测试成功的情况下，确定网络连通性检测结果为检测正常。在第一测试操作结果为测试失败的情况下，利用资源数据执行Tcping测试操作。在Tcping测试操作的测试结果为测试成功的情况下，确定网络连通性检测结果为检测正常。在Tcping测试操作的测试结果为测试失败的情况下，利用资源数据执行Tracert测试操作。在Tracert测试操作的测试结果为测试失败的情况下，确定网络连通性检测结果为检测异常。在Tracert测试操作的测试结果为测试成功的情况下，确定网络连通性检测结果为检测正常。
电子设备在执行Tracert测试操作时，若测试节点的数量大于第一阈值，或超时节点的数量大于第二阈值，则确定网络连通性较差，此时，网络连通性检测结果仍为检测正常。其中，第一阈值大于第二阈值。在实际实施时，第一阈值和第二阈值可以根据实际情况设定，在此不做限定。例如，第一阈值为20，第二阈值可以为10。
可选的，在域名封堵检测结果为DNS安全封堵域名的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行网络连通性检测操作，得到网络连通性检测结果；
在网络连通性检测结果为检测异常的情况下，确定第一网页的故障类型为网络协议地址异常。
在本实施方式中，在域名封堵检测结果为DNS安全封堵域名的情况下，利用资源数据执行网络连通性检测操作，得到网络连通性检测结果，然后在网络连通性检测结果为检测异常的情况下，确定第一网页的故障类型为网络协议地址异常。这样，能够进一步自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
在一些可选的实施方式中，在第一操作包括DPI封堵检测操作的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行DPI封堵检测操作，得到DPI封堵检测结果；
在DPI封堵检测结果为集团DPI封堵的情况下，确定第一网页的故障类型为集团DPI封堵；
在DPI封堵检测结果为省内DPI封堵的情况下，确定第一网页的故障类型为省内DPI封堵；
在DPI封堵检测结果为DPI未封堵的情况下，确定第一网页的故障类型为源站访问受限。
在本实施方式中，通过利用资源数据执行DPI封堵检测操作，根据DPI封堵检测结果，能够自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
DPI封堵检测结果可以包括集团DPI封堵、省内DPI封堵和DPI未封堵。
示例性的，电子设备可以与集团DPI封堵系统和省内DPI封堵系统均连接。电子设备可以通过与集团DPI封堵系统电连接的接口，确定资源数据相关异常域名是否为集团DPI封堵系统中的封堵域名。在资源数据相关异常域名为集团DPI封堵系统中的封堵域名的情况下，确定DPI封堵检测结果为集团DPI封堵。在资源数据相关异常域名不为集团DPI封堵系统中的封堵域名的情况下，电子设备可以通过与省内DPI封堵系统电连接的接口，确定资源数据相关异常域名是否为省内DPI封堵系统中的封堵域名。在资源数据相关异常域名为省内DPI封堵系统中的封堵域名的情况下，确定DPI封堵检测结果为省内DPI封堵。在资源数据相关异常域名不为省内DPI封堵系统中的封堵域名的情况下，确定DPI封堵检测结果为DPI未封堵。
可选的，在网络连通性检测结果为检测正常的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，可以包括：
利用资源数据执行DPI封堵检测操作，得到DPI封堵检测结果；
在DPI封堵检测结果为集团DPI封堵的情况下，确定第一网页的故障类型为集团DPI封堵；
在DPI封堵检测结果为省内DPI封堵的情况下，确定第一网页的故障类型为省内DPI封堵；
在DPI封堵检测结果为DPI未封堵的情况下，确定第一网页的故障类型为源站访问受限。
在本实施方式中，在网络连接性检测结果为检测正常的情况下，利用资源数据执行DPI封堵检测操作，根据DPI封堵检测结果，能够进一步自动识别第一网页的故障类型，使得网页故障识别不受技术人员的专业水平影响，进而可以降低对技术人员的要求，提高网页故障识别的准确性，同时，相对于技术人员结合各种命令、抓包工具和系统进行人工判断，本申请能够提高网页故障识别的效率。
在一些可选的实施方式中，资源数据可以包括本网资源数据和异网资源数据；获取第一网页的资源数据之后，利用资源数据执行第一操作，得到第一网页的故障类型之前，方法还包括：
根据本网资源数据和异网资源数据，确定特征值；
根据特征值，确定第一网页的异常是否会影响用户感知；
利用资源数据执行第一操作，得到第一网页的故障类型，包括：
在第一网页的异常会影响用户感知的情况下，利用资源数据执行第一操作，得到第一网页的故障类型。
在本实施方式中，通过本网资源数据和异网资源数据，确定特征值，进而根据特征确定第一网页的异常是否会影响用户感知；在第一网页的异常会影响用户感知的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，避免了在第一网页的异常不会影响用户感知的情况下，利用资源数据执行第一操作，得到第一网页的故障类型，能够减少电子设备的功率消耗。
本网资源数据可以是通过本网访问第一网页时，第一网页包括的资源数据。
异网资源数据可以是通过异网访问第一网页时，第一网页包括的资源数据。
本网和异网是相对而言的。例如，本网为A网时，B网则为异网。
可选的，本网资源数据可以包括本网显示的第一网页的元素数量、各个元素的大小及第一网页显示界面截图；异网资源数据可以包括第二网页显示界面截图。特征值可以包括本网显示的第一网页的网站大小、第一网页的元素数量、图像余弦相似度，第一网页显示界面截图中的白色像素点占比。其中，第一网页的网页大小可以由各个元素的大小相加得到。第一网页显示界面截图中的白色像素点占比可以为第一网页显示界面截图中的白色像素点与所有颜色的总像素点的比值。图像余弦相似度可以根据第一网页显示界面截图与第二网页显示界面截图得到。
可选的，本网资源数据还可以包括本网显示的第一网页的响应状态码，异网资源数据还可以包括异网显示的第一网页的元素数量、各个元素的大小和第一网页的响应状态码。
在一些可选的实施方式中，根据特征值，确定第一网页的异常是否会影响用户感知，可以包括：
将特征值输入用户体验判断模型，得到用户体验判断结果；
根据用户体验判断结果，确定第一网页的异常是否会影响用户感知。
若用户体验正常，则资源数据相关的域名为埋点域名。埋点域名可以理解为非实际影响用户上网交互体验的域名，比如互联网公司用于记录和分析用户行为的埋点域名。若用户体验异常，则资源数据相关的域名不为埋点域名，需要进一步识别网页故障类型。
在一些可选的实施方式中，根据本网资源数据和异网资源数据，确定特征值之前，方法还可以包括：
在客户端的网络检测正常的情况下，获取本网资源数据和异网资源数据；
在本网存在异常的情况下，确定异网是否存在与本网相同的异常；
根据本网资源数据和异网资源数据，确定特征值，包括：
在异网不存在与本网相同的异常的情况下，根据本网资源数据和异网资源数据，确定特征值。
在本实施方式中，在异网不存在与本网相同的异常的情况下，根据本网资源数据和异网资源数据，确定特征值，能够减少电子设备的功率消耗。
在本实施例中，在异网存在与本网相同的异常的情况下，确定第一网页的故障类型为源站故障。
客户端即用户访问第一网页的设备，如电脑和手机等电子设备。
可选的，可以通过Go语音获取本网资源数据和异网资源数据。
可选的，进行客户端的网络检测之前，还可以判断用户输入的统一资源定位符(Uniform Resource Locator，缩写为URL)是否完整，在用户输入的统一资源定位符不完整的情况下，补全统一资源定位符。例如，用户输入的统一资源定位符为XXX.com，则判断用户输入的统一资源定位符不完整，补全统一资源定位符，得到https：//XXX.com。
在一些可选的实施方式中，将特征值输入用户体验判断模型，得到用户体验判断结果之前，方法还可以包括：
获取训练样本集，训练样本集可以包括多个训练样本，每个训练样本可以包括至少三个特征值以及至少三个特征值对应的标签；
利用预设模型训练训练样本，直至满足训练停止条件，得到训练后的至少一个用户体验判断模型。
可选的，预设模型包括随机决策森林算法。
需要说明的是，若三个训练样本中分别包括相同的三个特征值，但这三个特征值的顺序不同，则这三个训练样本视为不同的三个样本。本申请实施例以特征值为四个为例，利用预设模型训练训练样本可以得到A(4，3)+A(4，4)＝48个用户体验判断模型。
可选的，根据用户体验判断结果，确定第一网页的异常是否会影响用户感知，可以包括：
在用户体验判断结果为多个的情况下，根据用户体验判断结果为是数量与用户体验判断结果的总数量的比值，确定第一网页的异常是否会影响用户感知。
用户体验判断结果为是，认为用户体验异常；用户体验结果为否，认为用户体验正常。
具体的，若比值大于比值阈值，则确定用户体验异常；若比值小于比值阈值，则确定用户体验正常。比值阈值可以根据实际情况设定，在此不做限定。例如，若比值为0.8，比值阈值为0.9，则确定用户体验正常；若比值为0.89，比值阈值为0.85，则确定用户体验异常。
可选的，在用户体验判断结果为一个时，用户体验判断结果即为用户体验是否异常的结果。例如，用户体验判断结果为一个，且用户体验判断结果为是，则确定用户体验异常。又例如，用户体验判断结果为一个，且用户体验判断结果为否，则确定用户体验正常。
可选的，将特征值输入用户体验判断模型，得到用户体验判断结果之后，方法还可以包括：
获取判断结果错误样本集，判断结果错误样本集可以包括至少三个特征值，以及至少三个特征值对应的正确标签；
根据判断结果错误样本集，更新用户体验判断模型。
判断结果错误样本集可以是用户体验判断模型的用户体验判断结果是错误的判断结果的样本集。
可选的，利用资源数据执行第一操作，得到第一网页的故障类型之后，方法还可以包括：
输出第一网页的故障类型。
示例性的，可以通过以下至少一种方式输出第一网页的故障类型：将第一网页的故障类型以图像化界面展示，及语音播报第一网页的故障类型。
可选的，利用资源数据执行第一操作，得到第一网页的故障类型之后，方法还可以包括：
生成第一网页的故障类型对应的故障分析日志；
存储故障分析日志。
在本实施方式中，通过生成第一网页的故障类型对应的故障分析日志，并存储故障分析日志，便于对故障分析日志进行周期性分析统计和查询。
基于与上述网页故障识别方法相同的发明构思，本申请实施例还提供一种网页故障识别装置，下面对网页故障识别装置进行详细介绍。
图2是本申请实施例提供的一种网页故障识别装置的结构示意图。如图2所示，所述网页故障识别装置200可以应用于电子设备，可以包括：
第一获取模块210，用于获取第一网页的资源数据，第一网页为异常网页；
执行模块220，用于利用资源数据执行第一操作，得到第一网页的故障类型；
其中，第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作和DPI封堵检测操作。
在一些实施方式中，在第一操作包括DNS解析操作的情况下，执行模块220，可以包括：
第一执行子模块，用于利用资源数据，依次执行第一解析操作、第二解析操作和第三解析操作中的至少一项，得到目标解析结果；
第一确定子模块，用于在目标解析结果为第三解析操作的解析结果为解析失败的情况下，确定第一网页的故障类型为第二解析异常；
第二确定子模块，用于在目标解析结果为第三解析操作的解析结果为解析成功的情况下，确定第一网页的故障类型为域名无法解析；
其中，第i解析操作的执行条件是：第i-1解析操作的解析结果为解析失败，i等于2或3；第一解析操作为运营商DNS解析操作，第二解析操作为本地DNS解析操作，第三解析操作为权威DNS解析操作。
在一些实施方式中，在第一操作包括域名封堵检测操作的情况下，执行模块220，可以包括：
第二执行子模块，用于利用资源数据执行域名封堵检测操作，得到域名封堵检测结果；
第三确定子模块，用于在域名封堵检测结果为非DNS安全封堵域名的情况下，确定第一网页的故障类型为域名封堵。
在一些实施方式中，在第一操作包括网络连通性检测操作的情况下，执行模块220，可以包括：
第三执行子模块，用于利用资源数据执行网络连通性检测操作，得到网络连通性检测结果；
第四确定子模块，用于在网络连通性检测结果为检测异常的情况下，确定第一网页的故障类型为网络协议地址异常。
在一些实施方式中，在第一操作包括DPI封堵检测操作的情况下，执行模块220，可以包括：
第四执行子模块，用于利用资源数据执行DPI封堵检测操作，得到DPI封堵检测结果；
第五确定子模块，用于在DPI封堵检测结果为集团DPI封堵的情况下，确定第一网页的故障类型为集团流量检测控制封堵；
第六确定子模块，用于在DPI封堵检测结果为省内DPI封堵的情况下，确定第一网页的故障类型为省内流量检测控制封堵；
第七确定子模块，用于在DPI封堵检测结果为DPI未封堵的情况下，确定第一网页的故障类型为源站访问受限。
在一些实施方式中，执行模块220，可以具体用于：
将资源数据输入网络诊断模型，得到第一网页的故障类型；
其中，网络诊断模型利用资源数据执行第一操作，得到第一网页的故障类型。
在一些实施方式中，网页故障识别装置200，还可以包括：
第一确定模块，用于根据本网资源数据和异网资源数据，确定特征值；
第二确定模块，用于根据特征值，确定第一网页的异常是否会影响用户感知；
执行模块220，可以具体用于：
在第一网页的异常会影响用户感知的情况下，利用资源数据执行第一操作，得到第一网页的故障类型。
在一些可选的实施方式中，第九确定子模块，可以包括：
输入单元，用于将特征值输入用户体验判断模型，得到用户体验判断结果；
确定单元，用于根据用户体验判断结果，确定第一网页的异常是否会影响用户感知。
在一些实施方式中，网页故障识别装置200，还可以包括：
第二获取模块，用于在客户端的网络检测正常的情况下，获取本网资源数据和异网资源数据；
第三确定模块，用于在本网存在异常的情况下，确定异网是否存在与本网相同的异常；
第一确定模块，可以具体用于：
在异网不存在与本网相同的异常的情况下，根据本网资源数据和异网资源数据，确定特征值。
关于上述实施例中的装置，其中各个模块执行操作的具体方式以及有益效果已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图3示出了本申请实施例提供的电子设备的硬件结构示意图。
在电子设备可以包括处理器301以及存储有计算机程序指令的存储器302。
具体地，上述处理器301可以包括中央处理器(CPU)，或者特定集成电路(Application Specific Integrated Circuit，ASIC)，或者可以被配置成实施本申请实施例的一个或多个集成电路。
存储器302可以包括用于数据或指令的大容量存储器。举例来说而非限制，存储器302可包括硬盘驱动器(Hard Disk Drive，HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus，USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下，存储器302可包括可移除或不可移除(或固定)的介质。在合适的情况下，存储器302可在综合网关容灾设备的内部或外部。在特定实施例中，存储器302是非易失性固态存储器。
存储器可包括只读存储器(ROM)，随机存取存储器(RAM)，磁盘存储介质设备，光存储介质设备，闪存设备，电气、光学或其他物理/有形的存储器存储设备。因此，通常，存储器包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介质(例如，存储器设备)，并且当该软件被执行(例如，由一个或多个处理器)时，其可操作来执行参考根据本公开的一方面的方法所描述的操作。
处理器301通过读取并执行存储器302中存储的计算机程序指令，以实现上述实施例中的任意一种网页故障识别方法。
在一个示例中，电子设备还可包括通信接口303和总线310。其中，如图3所示，处理器301、存储器302、通信接口303通过总线310连接并完成相互间的通信。
通信接口303，主要用于实现本申请实施例中各模块、装置、单元和/或设备之间的通信。
总线310包括硬件、软件或两者，将电子设备的部件彼此耦接在一起。举例来说而非限制，总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下，总线310可包括一个或多个总线。尽管本申请实施例描述和示出了特定的总线，但本申请考虑任何合适的总线或互连。
该电子设备可以执行本申请实施例中的网页故障识别方法，从而实现结合图1和图2描述的网页故障识别方法和装置。
另外，结合上述实施例中的网页故障识别方法，本申请实施例可提供一种计算机存储介质来实现。该计算机存储介质上存储有计算机程序指令；该计算机程序指令被处理器执行时实现上述实施例中的任意一种网页故障识别方法。
需要明确的是，本申请并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见，这里省略了对已知方法的详细描述。在上述实施例中，描述和示出了若干具体的步骤作为示例。但是，本申请的方法过程并不限于所描述和示出的具体步骤，本领域的技术人员可以在领会本申请的精神后，作出各种改变、修改和添加，或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时，其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时，本申请的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中，或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路，等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
还需要说明的是，本申请中提及的示例性实施例，基于一系列的步骤或者装置描述一些方法或系统。但是，本申请不局限于上述步骤的顺序，也就是说，可以按照实施例中提及的顺序执行步骤，也可以不同于实施例中的顺序，或者若干步骤同时执行。
上面参考根据本公开的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各方面。应当理解，流程图和/或框图中的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给通用计算机、专用计算机、或其它可编程数据处理装置的处理器，以产生一种机器，使得经由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的一个或多个方框中指定的功能/动作的实现。这种处理器可以是但不限于是通用处理器、专用处理器、特殊应用处理器或者现场可编程逻辑电路。还可理解，框图和/或流程图中的每个方框以及框图和/或流程图中的方框的组合，也可以由执行指定的功能或动作的专用硬件来实现，或可由专用硬件和计算机指令的组合来实现。
以上所述，仅为本申请的具体实施方式，所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的系统、模块和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。应理解，本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。

Claims (13)

1.一种网页故障识别方法，其特征在于，包括：
获取第一网页的资源数据，所述第一网页为异常网页；
利用所述资源数据执行第一操作，得到所述第一网页的故障类型；
其中，所述第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作DPI封堵检测操作。
2.根据权利要求1所述的网页故障识别方法，其特征在于，在所述第一操作包括所述DNS解析操作的情况下，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
利用所述资源数据依次执行第一解析操作、第二解析操作和第三解析操作中的至少一项，得到目标解析结果；
在所述目标解析结果为所述第三解析操作的解析结果为解析失败的情况下，确定所述第一网页的故障类型为第二解析异常；
在所述目标解析结果为所述第三解析操作的解析结果为解析成功的情况下，确定所述第一网页的故障类型为域名无法解析；
其中，第i解析操作的执行条件是：第i-1解析操作的解析结果为解析失败，i等于2或3；所述第一解析操作为运营商DNS解析操作，所述第二解析操作为本地DNS解析操作，所述第三解析操作为权威DNS解析操作。
3.根据权利要求1所述的网页故障识别方法，其特征在于，在所述第一操作包括域名封堵检测操作的情况下，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
利用所述资源数据执行域名封堵检测操作，得到域名封堵检测结果；
在所述域名封堵检测结果为非DNS安全封堵域名的情况下，确定所述第一网页的故障类型为域名封堵。
4.根据权利要求1所述的网页故障识别方法，其特征在于，在所述第一操作包括网络连通性检测操作的情况下，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
利用所述资源数据执行网络连通性检测操作，得到网络连通性检测结果；
在所述网络连通性检测结果为检测异常的情况下，确定所述第一网页的故障类型为网络协议地址异常。
5.根据权利要求1所述的网页故障识别方法，其特征在于，在所述第一操作包括DPI封堵检测操作的情况下，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
利用所述资源数据执行DPI封堵检测操作，得到DPI封堵检测结果；
在所述DPI封堵检测结果为集团DPI封堵的情况下，确定所述第一网页的故障类型为集团DPI封堵；
在所述DPI封堵检测结果为省内DPI封堵的情况下，确定所述第一网页的故障类型为省内DPI封堵；
在所述DPI封堵检测结果为DPI未封堵的情况下，确定所述第一网页的故障类型为源站访问受限。
6.根据权利要求1所述的网页故障识别方法，其特征在于，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
将所述资源数据输入网络诊断模型，得到所述第一网页的故障类型；
其中，所述网络诊断模型利用所述资源数据执行第一操作，得到所述第一网页的故障类型。
7.根据权利要求1所述的网页故障识别方法，其特征在于，所述资源数据包括本网资源数据和异网资源数据；所述获取第一网页的资源数据之后，所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型之前，所述方法还包括：
根据所述本网资源数据和所述异网资源数据，确定特征值；
根据所述特征值，确定所述第一网页的异常是否会影响用户感知；
所述利用所述资源数据执行第一操作，得到所述第一网页的故障类型，包括：
在所述第一网页的异常会影响用户感知的情况下，利用所述资源数据执行第一操作，得到所述第一网页的故障类型。
8.根据权利要求7所述的网页故障识别方法，其特征在于，所述根据所述特征值，确定第一网页的异常是否会影响用户感知，包括：
将所述特征值输入用户体验判断模型，得到用户体验判断结果；
根据所述用户体验判断结果，确定第一网页的异常是否会影响用户感知。
9.根据权利要求7所述的网页故障识别方法，其特征在于，所述根据所述本网资源数据和所述异网资源数据，确定特征值之前，所述方法还包括：
在客户端的网络检测正常的情况下，获取本网资源数据和异网资源数据；
在本网存在异常的情况下，确定异网是否存在与所述本网相同的异常；
所述根据所述本网资源数据和所述异网资源数据，确定特征值，包括：
在所述异网不存在与所述本网相同的异常的情况下，根据所述本网资源数据和所述异网资源数据，确定特征值。
10.一种网页故障识别装置，其特征在于，包括：
第一获取模块，用于获取第一网页的资源数据，所述第一网页为异常网页；
执行模块，用于利用所述资源数据执行第一操作，得到所述第一网页的故障类型；
其中，所述第一操作包括以下至少一项：DNS解析操作、域名封堵检测操作、网络连通性检测操作和DPI封堵检测操作。
11.一种电子设备，其特征在于，所述设备包括：处理器以及存储有计算机程序指令的存储器；
所述处理器执行所述计算机程序指令时实现如权利要求1-9任意一项所述的网页故障识别方法。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现如权利要求1-9任意一项所述的网页故障识别方法。
13.一种计算机程序产品，其特征在于，所述计算机程序产品中的指令由电子设备的处理器执行时，所述电子设备执行如权利要求1-9任意一项所述的网页故障识别方法。
CN202211418115.3A 2022-11-14 2022-11-14 网页故障识别方法、装置、设备及计算机存储介质 Pending CN116962242A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211418115.3A CN116962242A (zh) 2022-11-14 2022-11-14 网页故障识别方法、装置、设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211418115.3A CN116962242A (zh) 2022-11-14 2022-11-14 网页故障识别方法、装置、设备及计算机存储介质

Publications (1)

Publication Number Publication Date
CN116962242A true CN116962242A (zh) 2023-10-27

Family

ID=88444978

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211418115.3A Pending CN116962242A (zh) 2022-11-14 2022-11-14 网页故障识别方法、装置、设备及计算机存储介质

Country Status (1)

Country Link
CN (1) CN116962242A (zh)

Similar Documents

Publication Publication Date Title
CN110324311B (zh) 漏洞检测的方法、装置、计算机设备和存储介质
CN112989348B (zh) 攻击检测方法、模型训练方法、装置、服务器及存储介质
CN107341399B (zh) 评估代码文件安全性的方法及装置
CN113032792A (zh) 系统业务漏洞检测方法、系统、设备及存储介质
CN108206769B (zh) 过滤网络质量告警的方法、装置、设备和介质
CN110069413B (zh) 测试数据通信、测试方法、装置、设备及存储介质
CN111625837B (zh) 识别系统漏洞的方法、装置和服务器
CN116346456A (zh) 业务逻辑漏洞攻击检测模型训练方法及装置
CN111666193B (zh) 基于实时日志解析的终端功能监控与测试的方法与系统
CN113986643A (zh) 分析日志文件的方法、电子设备和计算机程序产品
CN109309665B (zh) 一种访问请求处理方法及装置、一种计算设备及存储介质
CN116962242A (zh) 网页故障识别方法、装置、设备及计算机存储介质
CN116915630A (zh) 网络卡顿预测方法、装置、电子设备、介质和程序产品
CN113079052B (zh) 模型训练、物联网数据识别方法、装置、设备及存储介质
CN115858320A (zh) 操作日志记录方法、装置、介质及产品
CN115842861A (zh) 边缘连接设备适配方法、装置及计算机可读存储介质
CN109039813B (zh) 一种检测因特网接入的方法、系统及设备
CN112929458B (zh) App应用的服务端地址确定方法、装置以及存储介质
CN114172980A (zh) 一种识别操作系统类型的方法、系统、装置、设备及介质
CN111131351B (zh) 一种物联网设备型号的确认方法及装置
CN113051876A (zh) 恶意网址识别方法及装置、存储介质、电子设备
CN113238971A (zh) 基于状态机的自动化渗透测试系统及方法
CN114070819B (zh) 恶意域名检测方法、设备、电子设备及存储介质
CN117009909B (zh) 自动报障模型的构建方法、自动报障方法及其装置
CN114816876B (zh) 一种服务器Redfish接口规范的自动化测试系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination