CN107368399A - 一种线上网页监控方法及系统 - Google Patents

一种线上网页监控方法及系统 Download PDF

Info

Publication number
CN107368399A
CN107368399A CN201710508422.3A CN201710508422A CN107368399A CN 107368399 A CN107368399 A CN 107368399A CN 201710508422 A CN201710508422 A CN 201710508422A CN 107368399 A CN107368399 A CN 107368399A
Authority
CN
China
Prior art keywords
webpage
line
index data
control index
monitor control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710508422.3A
Other languages
English (en)
Inventor
刘富龙
张文明
陈少杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Douyu Network Technology Co Ltd
Original Assignee
Wuhan Douyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Douyu Network Technology Co Ltd filed Critical Wuhan Douyu Network Technology Co Ltd
Priority to CN201710508422.3A priority Critical patent/CN107368399A/zh
Publication of CN107368399A publication Critical patent/CN107368399A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3604—Software analysis for verifying properties of programs
    • G06F11/3612—Software analysis for verifying properties of programs by runtime analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种线上网页监控方法及系统，所述的方法包括：S1，监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；S2，根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；S3，当线上网页的监控指标数据出现异常时，触发报警。通过本发明，能够对各个需要线上网页的监控指标数据进行自动检测，无需专业人员进行检测，有效降低了监控人员的检测成本，提升网页构建质量。

Description

一种线上网页监控方法及系统
技术领域
本发明涉及网页监控技术领域，更具体地，涉及一种线上网页监控方法及系统。
背景技术
随着互联网的发展，门户网站、电子商务网站、直播网站等各类网站层出不穷，各类公司业务的迅速发展，随之产生了大量活动网页的需求，活动网页用于吸引公司用户，许多公司提供了自助式的建站平台。
在自助式建站平台中，组件开发人员向平台提供工具，即模板或组件。活动网页开发人员可根据提供的工具，快速地开发出质量较高的活动网页。
但是网页开发人员往往是由公司的运营、销售、设计以及相关支持组人员所构成，对于网页的一些细节处理不是很专业。比如将某些链接设置成空链或者设置成无效链接，如填写填写了公司内网的地址，外界无法访问的链接。
由于网页的需求日益增加，会安排测试人员人工对网页开发人员所制作的活动网页进行一一审查再上线，费时费力。
发明内容
本发明提供一种克服上述问题或者至少部分地解决上述问题的线上网页监控方法及系统，克服了对多个线上网页人工监控困难的问题。
根据本发明的第一个方面，提供了一种线上网页监控方法，包括：
S1，监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
S2，根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
S3，当线上网页的监控指标数据出现异常时，触发报警。
本发明的有益效果为：能够通过监听开发人员对线上网页的发布按钮的点击，对各个线上网页的监控指标数据进行自动检测，无需专业人员进行检测，有效降低了监控人员的检测成本，提升网页构建质量。
在上述技术方案的基础上，本发明还可以作如下改进。
进一步的，所述步骤S1进一步包括：
监听网页客户端上每一个线上网页的发布按钮点击事件，调用服务器提供的API接口收集线上网页的相关信息；
将每一个线上网页的相关信息存储于任务队列中，其中，一个线上网页的相关信息作为任务队列中的一个任务。
进一步的，所述线上网页的相关信息中包括线上网页应用地址，所述步骤S2中根据每一个线上网页的相关信息得到该线上网页的监控指标数据包括：
根据线上网页应用地址，下载网页，得到网页整体文件；
利用正则匹配规则，从网页整体文件中得到网页内所有的链接标签URL地址和图片标签URL地址，其中，所述链接标签URL地址和图片标签URL地址为线上网页的监控指标数据。
进一步的，还包括：
将每一个线上网页的链接标签URL地址和图片标签URL地址放入地址队列中，其中，为每一个线上网页定义对应的地址队列。
进一步的，所述步骤S2中对每一个线上网页的监控指标数据进行检测分析包括：
在后台服务器中向地址队列中的每一个URL地址发送访问请求，根据访问请求的响应结果判断每一个URL地址是否为有效链接。
进一步的，所述线上网页的相关信息中还包括线上网页开发人员信息，所述步骤S3中当线上网页的监控指标数据出现异常时，触发报警包括：
当判断出URL地址为无效链接时，根据线上网页开发人员信息，将触发的报警信息发送给线上网页开发人员。
进一步的，所述报警信息包括无效链接的地址以及该无效链接地址所属的线上网页应用地址。
根据本发明的第二方面，提供了一种线上网页监控系统，包括：
收集模块，用于监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
分析模块，用于根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
报警模块，用于当线上网页的监控指标数据出现异常时，触发报警。
根据本发明的第三方面，提供了一种线上网页监控方法的设备，包括处理器(processor)、存储器(memory)和总线；
所述处理器和存储器通过所述总线完成相互间的通信；
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如下方法：
监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
当线上网页的监控指标数据出现异常时，触发报警。
根据本发明的第四方面，提供了一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如下方法：
监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
当线上网页的监控指标数据出现异常时，触发报警。
附图说明
图1为本发明一个实施例的线上网页监控方法流程图；
图2为本发明另一个实施例的线上网页监控系统连接框图；
图3为本发明又一个实施例的线上网页监控系统的整体连接框图；
图4为本发明再一个实施例的线上网页监控方法的设备连接框图。
具体实施方式
下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
参见图1，提供了本发明一个实施例的线上网页监控方法，包括：S1，监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；S2，根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；S3，当线上网页的监控指标数据出现异常时，触发报警。
在互联网飞速发展的过程中，各种网站层出不穷，随之也产生了大量的活动网页，对于大量的活动网页的监控就成了问题，如果均采用人工进行监控，一则效率低，二则对监控人员的专业知识具有要求，这样会使监控的成本很高。
因此，本实施例提供了一种能够提高对线上网页的监控效率的网页监控方法，网页开发人员开发网页之后需要发布，网页才能展示到线上供用户浏览。因此，当网页开发人员点击发布按钮时，对线上网页的发布按钮点击事件进行监听，当监听到网页的发布按钮点击事件时，收集每一个线上网页的相关信息，从收集的线上网页的相关信息中能够得到线上网页的监控指标数据，其中，监控指标数据是需要对线上网页进行监控监控的数据。得到每一个线上网页的监控指标数据后，对这些监控指标数据进行监控分析，以判断该线上网页是否正常，若分析出线上网页指标数据出现异常，则触发报警。能够对各个线上网页的监控指标数据进行自动检测，无需专业人员进行检测，有效降低了监控人员的检测成本，提升网页构建质量。
在上述实施例的基础上，本发明还提供了另一个实施例，收集每一个线上网页的监控指标数据的具体过程为，监听网页客户端上每一个线上网页的发布按钮点击事件，当监听线上网页发布按钮事件时，收集每一个线上网页的相关信息，一段时间后，将收集的信息传递给服务器提供的API(Application Programming Interface，应用程序编程接口)接口，服务器提供给客户端调用的API接口的具体地址是可以根据需求而定。其中，收集的线上网页的相关信息主要包括线上网页开发人员信息、网页创建时间、网页下载时间、网页名以及线上网页应用地址，其中，线上网页开发人员信息包括用户名和邮箱等。当收集了发布线上的每一个网页的相关信息后，将每一个线上网页的相关信息存储于任务队列taskQueue中，任务队列taskQueue是数组形式的数据结构，其中，一个线上网页的相关信息作为任务队列中的一个任务。
在上述所有实施例的基础上，本发明还提供了另一个实施例，所述步骤S2中根据每一个线上网页的相关信息得到该线上网页的监控指标数据包括：根据线上网页应用地址，下载网页，得到网页整体文件；利用正则匹配规则，从网页整体文件中得到网页内所有的链接标签URL(Uniform Resource Locator，统一资源定位符)地址和图片标签URL地址，其中，所述链接标签URL地址和图片标签URL地址为线上网页的监控指标数据。
上述实施例收集了每一个线上网页的相关信息，并存储于任务队列中，服务端循环执行任务队列中的任务，当判断到任务队列中有任务时，根据该任务对应的线上网页应用地址，下载网页，得到该网页的整个文件。根据正则匹配规则，从网页的整个文件中得到该线上网页中所有的链接标签URL地址和图片标签URL地址。其中获得的网页内的所有链接标签URL地址和所有图片标签URL地址即是上述所说的线上网页的监控指标数据。
将获取的每一个线上网页内的所有的链接标签URL地址和所有图片标签URL地址均存放入一个地址队列URLQueue中，其中，为每一个线上网页均定义一个地址队列URLQueue，用来存放该线上网页内的所有链接标签URL地址和所有图片标签URL地址。
在上述所有实施例的基础上，本发明的另一个实施例中，所述步骤S2中对每一个线上网页的监控指标数据进行检测分析包括：在后台服务器中向地址队列中的每一个URL地址发送访问请求，根据访问请求的响应结果判断每一个URL地址是否为有效链接。
本实施例在具体对每一个线上网页的监控指标数据进行监控分析时，在后台服务器通过get方法向地址队列中的每一个URL地址发送访问请求，根据访问请求对应的响应信息来判断该URL地址是否为有效地址。比如，当访问请求得到的返回码为200，则表明该URL地址为有效链接，否则，该URL地址为无效链接，即错误链接。其中，每监控完一个URL地址，则将该URL地址从地址队列中删除。循环对地址队列中的每一个URL地址进行监控分析，直到地址队列为空。
当监控分析完一个线上网页的相关数据后，将该线上网页的相关信息从任务队列中删除，并循环对任务队列中的各个任务进行执行，即对任务队列中的每一个线上网页的相关信息进行监控分析，判断每一个线上网页是否正常。
在上述所有实施例的基础上，本发明的另一个实施例中，所述步骤S3中当线上网页的监控指标数据出现异常时，触发报警包括：当判断出URL地址为无效链接时，根据线上网页开发人员信息，将触发的报警信息发送给线上网页开发人员。
上述实施例对每一个线上网页中的所有链接标签URL地址和图片标签URL地址进行了监控分析后，当判断出URL地址为无效地址时，则触发报警信息。上述收集的线上网页的相关信息中包含网页开发人员信息，主要包括开发人员的用户名、手机号和邮箱等。根据线上网页开发人员信息，将触发的告警信息发送给网页开发人员和管理人员，以便及时处理。
其中，服务器主要是通过邮件和短信的方式将报警信息发送给网页开发人员和负责管理人员，第一时间方便开发人员分析定位。在报警的过程中，需要对线上页面取证留存，即当线上网页内的链接出现无效链接时，需要将无效链接的URL地址以及该URL地址所属的线上网页应用地址均发送给网页开发人员，以便网页开发人员定位。服务器会优先以邮件的方式第一时间通知责任开发人员，并将此次报错信息记录至数据库中，待技术人员分析；若此次错误信息过多，则采用短信方式将报警信息发送给网页开发人员。
参见图2，提供了本发明另一个实施例的线上网页监控系统，包括收集模块21、分析模块22和报警模块23。
收集模块21，用于监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息。
分析模块22，用于根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析。
报警模块23，用于当线上网页的监控指标数据出现异常时，触发报警。
参见图3，在上述实施例的基础上，在本发明的另一实施例中，提供的线上网页监控系统中还包括第一存储模块24、获取模块25和第二存储模块26。
收集模块21，具体用于通过监听网页客户端上每一个线上网页的发布按钮点击事件，并调用服务器提供的API接口收集线上网页的相关信息。
第一存储模块24，用于将收集模块21收集的每一个线上网页的相关信息存储于任务队列中，其中，一个线上网页的相关信息作为任务队列中的一个任务，其中，线上网页的相关信息中包括线上网页应用地址。
获取模块25，用于根据线上网页应用地址，下载网页，得到网页整体文件；以及还用于利用正则匹配规则，从网页整体文件中得到网页内所有的链接标签URL地址和图片标签URL地址，其中，所述链接标签URL地址和图片标签URL地址为线上网页的监控指标数据。
第二存储模块26，用于将每一个线上网页的链接标签URL地址和图片标签URL地址放入地址队列中，其中，为每一个线上网页定义对应的地址队列。
分析模块22，具体用于通过在后台服务器中向地址队列中的每一个URL地址发送访问请求，并根据访问请求的响应结果判断每一个URL地址是否为有效链接。
报警模块23，用于当判断出URL地址为无效链接时，根据线上网页开发人员信息，将触发的报警信息发送给线上网页开发人员；其中，报警信息中包括无效链接的地址以及该无效链接地址所属的线上网页应用地址。
图4示出本申请实施例的线上网页监控方法的设备的结构框图。
参照图4，线上网页监控方法的设备包括：处理器(processor)401、存储器(memory)402和总线403；其中，所述处理器401和存储器402通过所述总线403完成相互间的通信。
所述处理器401用于调用所述存储器402中的程序指令，以执行上述各方法实施例所提供的方法，例如包括：监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；当线上网页的监控指标数据出现异常时，触发报警。
本发明公开一种计算机程序产品，该计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，该计算机程序包括程序指令，当程序指令被计算机执行时，计算机能够执行上述对应实施例所提供的线上网页监控方法，例如包括：监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；当线上网页的监控指标数据出现异常时，触发报警。
本发明还提供一种非暂态计算机可读存储介质，该非暂态计算机可读存储介质存储计算机指令，该计算机指令使计算机执行上述对应实施例所提供的线上网页监控方法，例如包括：监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；当线上网页的监控指标数据出现异常时，触发报警。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的线上网页监控方法的设备等实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分方法。
本发明提供了一种线上网页监控方法及系统，通过自动收集各个需要线上网页的监控指标数据，并对各个需要线上网页的监控指标数据进行自动检测，无需专业人员进行检测，有效降低了监控人员的检测成本，提升网页构建质量。
最后，本申请的方法仅为较佳的实施方案，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种线上网页监控方法，其特征在于，包括：
S1，监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
S2，根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
S3，当线上网页的监控指标数据出现异常时，触发报警。
2.如权利要求1所述的线上网页监控方法，其特征在于，所述步骤S1进一步包括：
监听网页客户端上每一个线上网页的发布按钮点击事件，并调用服务器提供的API接口收集线上网页的相关信息；
将每一个线上网页的相关信息存储于任务队列中，其中，一个线上网页的相关信息作为任务队列中的一个任务。
3.如权利要求2所述的线上网页监控方法，其特征在于，所述线上网页的相关信息中包括线上网页应用地址，所述步骤S2中根据每一个线上网页的相关信息得到该线上网页的监控指标数据包括：
根据线上网页应用地址，下载网页，得到网页整体文件；
利用正则匹配规则，从网页整体文件中得到网页内所有的链接标签URL地址和图片标签URL地址，其中，所述链接标签URL地址和图片标签URL地址为线上网页的监控指标数据。
4.如权利要求3所述的线上网页监控方法，其特征在于，还包括：
将每一个线上网页的链接标签URL地址和图片标签URL地址放入地址队列中，其中，为每一个线上网页定义对应的地址队列。
5.如权利要求4所述的线上网页监控方法，其特征在于，所述步骤S2中对每一个线上网页的监控指标数据进行检测分析包括：
在后台服务器中向地址队列中的每一个URL地址发送访问请求，根据访问请求的响应结果判断每一个URL地址是否为有效链接。
6.如权利要求5所述的线上网页监控方法，其特征在于，所述线上网页的相关信息中还包括线上网页开发人员信息，所述步骤S3中当线上网页的监控指标数据出现异常时，触发报警包括：
当判断出URL地址为无效链接时，根据线上网页开发人员信息，将触发的报警信息发送给线上网页开发人员。
7.如权利要求6所述的线上网页监控方法，其特征在于，所述报警信息包括无效链接URL地址以及该无效链接URL地址所属的线上网页应用地址。
8.一种线上网页监控系统，其特征在于，包括：
收集模块，用于监听对每一个线上网页的发布按钮点击事件，收集每一个线上网页的相关信息；
分析模块，用于根据每一个线上网页的相关信息得到该线上网页的监控指标数据，并对每一个线上网页的监控指标数据进行检测分析；
报警模块，用于当线上网页的监控指标数据出现异常时，触发报警。
9.一种线上网页监控方法的设备，其特征在于，包括处理器(processor)、存储器(memory)和总线；
所述处理器和存储器通过所述总线完成相互间的通信；
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如权利要求1-7任一项所述的方法。
10.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至7任一所述的方法。
CN201710508422.3A 2017-06-28 2017-06-28 一种线上网页监控方法及系统 Pending CN107368399A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710508422.3A CN107368399A (zh) 2017-06-28 2017-06-28 一种线上网页监控方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710508422.3A CN107368399A (zh) 2017-06-28 2017-06-28 一种线上网页监控方法及系统

Publications (1)

Publication Number Publication Date
CN107368399A true CN107368399A (zh) 2017-11-21

Family

ID=60306450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710508422.3A Pending CN107368399A (zh) 2017-06-28 2017-06-28 一种线上网页监控方法及系统

Country Status (1)

Country Link
CN (1) CN107368399A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019153479A1 (zh) * 2018-02-06 2019-08-15 武汉斗鱼网络科技有限公司 一种监听浏览器页面的方法、装置及计算机设备
CN110198324A (zh) * 2018-02-26 2019-09-03 腾讯科技（深圳）有限公司 数据监控方法、装置、浏览器及终端
CN113411332A (zh) * 2021-06-18 2021-09-17 杭州安恒信息技术股份有限公司 一种cors漏洞检测方法、装置、设备及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101937469A (zh) * 2010-09-15 2011-01-05 深圳市任子行网络技术股份有限公司 视频网站的信息抓取方法
CN102982162A (zh) * 2012-12-05 2013-03-20 北京奇虎科技有限公司 网页信息的获取系统
CN103530336A (zh) * 2013-09-30 2014-01-22 北京奇虎科技有限公司 统一资源定位符url中无效参数的识别设备及方法
CN104102673A (zh) * 2013-04-12 2014-10-15 腾讯科技（深圳）有限公司 一种网页状态监控方法和装置
CN105630790A (zh) * 2014-10-28 2016-06-01 阿里巴巴集团控股有限公司 网页编码的分析方法及装置
CN106484720A (zh) * 2015-08-28 2017-03-08 北京奇虎科技有限公司 一种检测推广url的有效性的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101937469A (zh) * 2010-09-15 2011-01-05 深圳市任子行网络技术股份有限公司 视频网站的信息抓取方法
CN102982162A (zh) * 2012-12-05 2013-03-20 北京奇虎科技有限公司 网页信息的获取系统
CN104102673A (zh) * 2013-04-12 2014-10-15 腾讯科技（深圳）有限公司 一种网页状态监控方法和装置
CN103530336A (zh) * 2013-09-30 2014-01-22 北京奇虎科技有限公司 统一资源定位符url中无效参数的识别设备及方法
CN105630790A (zh) * 2014-10-28 2016-06-01 阿里巴巴集团控股有限公司 网页编码的分析方法及装置
CN106484720A (zh) * 2015-08-28 2017-03-08 北京奇虎科技有限公司 一种检测推广url的有效性的方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
AOBOSIR: "通过正则表达式来获取一个网页中的所有的 URL链接，并下载这些URL链接的源代码", 《HTTPS://WWW.CNBLOGS.COM/AOBOSIR/P/5928540.HTML》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019153479A1 (zh) * 2018-02-06 2019-08-15 武汉斗鱼网络科技有限公司 一种监听浏览器页面的方法、装置及计算机设备
CN110198324A (zh) * 2018-02-26 2019-09-03 腾讯科技（深圳）有限公司 数据监控方法、装置、浏览器及终端
CN110198324B (zh) * 2018-02-26 2021-12-14 腾讯科技（深圳）有限公司 数据监控方法、装置、浏览器及终端
CN113411332A (zh) * 2021-06-18 2021-09-17 杭州安恒信息技术股份有限公司 一种cors漏洞检测方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
USRE48681E1 (en) System and method for tracking web interactions with real time analytics
CN102684934B (zh) 监控web应用程序性能的方法、系统和web服务器
US10121009B2 (en) Computer system for discovery of vulnerabilities in applications including guided tester paths based on application coverage measures
CN108764808A (zh) 数据分析处理系统及其在线模型部署方法
CN103403685B (zh) 在线隐私管理
US6766481B2 (en) Software suitability testing system
US8996986B2 (en) Enhanced delivery of content and program instructions
CN106294101B (zh) 页面打点测试方法和装置
CN105893259B (zh) 代码检测系统、方法及装置
CN113590497A (zh) 业务服务的测试方法、装置、电子设备及存储介质
US20130013680A1 (en) System and method for determining interpersonal relationship influence information using textual content from interpersonal interactions
CN109240874A (zh) 网站页面异常检测方法、装置及系统
CN101222349A (zh) 收集web用户行为及性能数据的方法及系统
US8949980B2 (en) Method and system for website data access monitoring
CN107368399A (zh) 一种线上网页监控方法及系统
CN109657459A (zh) 网页后门检测方法、设备、存储介质及装置
CN110196809A (zh) 接口测试方法及装置
CN115033876A (zh) 日志处理方法、日志处理装置、计算机设备及存储介质
CN114398465A (zh) 互联网服务平台的异常处理方法、装置和计算机设备
CN103581321B (zh) 一种refer链的创建方法、装置及安全检测方法和客户端
CN106357466A (zh) 一种互联网产品监控方法及监控系统
Frey Introduction to special section on sensitivity analysis and summary of NCSU/USDA workshop on sensitivity analysis
CN106126538A (zh) 页面的转化处理方法及装置
JP2018136845A (ja) ログ収集システム、ログ収集方法、アクセス解析システム、アクセス解析方法、及びプログラム
CN109685662A (zh) 投资数据处理方法、装置、计算机设备及其存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20171121