CN103729477A - 一种网页数据格式检测方法及装置 - Google Patents

一种网页数据格式检测方法及装置 Download PDF

Info

Publication number
CN103729477A
CN103729477A CN201410037488.5A CN201410037488A CN103729477A CN 103729477 A CN103729477 A CN 103729477A CN 201410037488 A CN201410037488 A CN 201410037488A CN 103729477 A CN103729477 A CN 103729477A
Authority
CN
China
Prior art keywords
request
server
data
http
status code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410037488.5A
Other languages
English (en)
Inventor
王玉梅
许华琳
夏鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Feihu Information Technology Tianjin Co Ltd
Original Assignee
Feihu Information Technology Tianjin Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Feihu Information Technology Tianjin Co Ltd filed Critical Feihu Information Technology Tianjin Co Ltd
Priority to CN201410037488.5A priority Critical patent/CN103729477A/zh
Publication of CN103729477A publication Critical patent/CN103729477A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种网页数据格式检测方法,包括:向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;获取服务器响应所述http请求后返回的HTTP状态码;如果所述HTTP状态码表示所述服务器成功返回网页,则从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;如果确定解析得到的网页数据的数据格式为错误格式,则发送第一报警信息。本发明还公开了一种网页数据格式检测装置。 

Description

一种网页数据格式检测方法及装置
技术领域
本发明涉及通信技术领域,尤其涉及一种网页数据格式检测方法及装置。 
背景技术
随着互联网的迅猛发展,在日益激烈的市场竞争中,决定网络市场份额的因素,除了网站内容及作用,网站的稳定性也日趋重要。网站在运行过程中,不可避免的会出现服务器挂掉、返回信息不正确等情况,这些情况将导致用户无法正常使用网站。如果网站开发者在等待用户反馈问题后,再去解决问题,这期间也许会失去很多用户,所以,保证网站开发者提供的服务不出错,或者在网站运行出错的第一时间得到问题反馈并对问题进行及时处理,可以避免网站不必要的损失。  
目前,对网站的监控方法是:首先向目标URL(Uniform / Universal Resource Locator,统一资源定位符)发起访问请求,然后根据目标URL返回的HTTP(HyperText Transfer Protocol,超文本传输协议)状态码来判断请求的状态,即,当返回的HTTP状态码为200(200表示服务器成功返回网页)时,判断请求正常,当返回的HTTP状态码不是200或者没有返回HTTP状态码时,判断请求异常。  
但是,对于现有的网站监控方法,只是根据返回的HTTP状态码来判断服务器是否成功返回网页,而对于返回网页中的格式是否正确、重要数据是否有值却无法判断,进而不能有针对性的对网页出现的问题进行处理。 
发明内容 
有鉴于此,本发明实施例的主要目的在于提供一种网页数据格式检测方法及装置,以实现检测网页数据格式是否正确的目的。  
为实现上述目的,本发明实施例提供了一种网页数据格式检测方法,包括:  
向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;  
获取服务器响应所述http请求后返回的HTTP状态码;  
如果所述HTTP状态码表示所述服务器成功返回网页,则从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;  
如果确定解析得到的网页数据的数据格式为错误格式,则发送第一报警信息。  
优选地,在上述方法中,所述HTTP请求为数据获取请求或数据提交请求。  
优选地,在上述方法中,所述数据格式为jsp格式、或xml格式、或json格式、或ajax格式。  
优选地,在上述方法中,所述向服务器发送http请求,具体包括:  
以固定的时间间隔向服务器发送http请求;  
或,在每天设定时刻向服务器发送http请求。  
优选地,上述方法还包括:  
如果依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页,则发送第二报警信息。  
优选地,上述方法还包括:  
当网络数据有更新时,替换所述URL中与所述更新的网络数据对应的参数。  
本发明实施例还提供了一种网页数据格式检测装置,包括:  
请求发送模块,用于向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;  
状态码获取模块,用于获取服务器响应所述请求发送模块发送的http请求后返回的HTTP状态码;  
格式解析模块,用于当所述状态码获取模块获取的HTTP状态码表示所述服务器成功返回网页时,从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;  
第一报警信息发送模块,用于当确定所述格式解析模块解析得到的网页数据的数据格式为错误格式时,发送第一报警信息。  
优选地,在上述装置中,所述HTTP请求为数据获取请求或数据提交请求。  
优选地,在上述装置中,所述数据格式为jsp格式、或xml格式、或json格式、或ajax格式。  
优选地,在上述装置中,所述请求发送模块,具体包括:  
第一发送单元,用于以固定的时间间隔向服务器发送http请求;  
第二发送单元,用于在每天设定时刻向服务器发送http请求。  
优选地,上述装置还包括:  
第二报警信息发送模块,用于在依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页时,发送第二报警信息。  
优选地,上述装置还包括:  
参数替换模块,用于当网络数据有更新时,替换所述URL中与所述更新的网络数据对应的参数。  
本发明实施例提供的网页数据格式检测方法及装置,在向服务器发送http请求后,通过获取服务器返回的HTTP状态码来检测所述http请求是否被执行,即检测所述服务器是否成功返回网页;在确定服务器成功返回网页的基础上,可进一步从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据,进而对所请求的网页数据的数据格式的正确性进行判断,当判断结果为数据格式错误时,即可向运维人员发送报警信息,以便进行及时处理和优化,从而保证网页的正常显示。  
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。  
图1为本发明实施例网页数据格式检测方法的流程示意图;  
图2为本发明实施例网页数据格式检测装置的结构示意图。  
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。  
参见图1,为本发明实施例提供的网页数据格式检测方法的流程示意图,具体包括:  
步骤101:向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据。  
在本发明实施例中,所述HTTP请求的请求方式包括两种,分别是:数据获取请求(即为get请求)和数据提交请求(即为post请求),步骤101中的http请求可以是其中的一种。  
其中,Get请求是向服务器发送索取数据的一种请求,而Post请求是向服务器提交数据的一种请求,URL(Uniform / Universal Resource Locator,统一资源定位符)是互联网上标准的资源地址,Get请求的参数会跟在URL后进行传递,http请求所请求的网页数据会附在URL之后并以参数的形式给出。  
举例说明:HTTP的URL由五个基本元素组成,即为:<传送协议><主机>:<端口>/<路径>?<参数>。一个典型的URL如下所示:    
http://access.tv.sohu.com:80/reply/cnts.do?videoId=1381522,1381225&jsonp=rp_vidsfocus&type=2  
其中:  
传送协议:http://  
主机:access.tv.sohu.com  
端口:80 (由于80是默认值,常常会省略掉)  
路径:/reply/cnts.do  
参数:videoId=1381522,1381225&jsonp=rp_vidsfocus&type=2 (get模式的窗体参数,以“?”字符为起点,每个参数以“&”隔开,再以“=”分开参数名称与网页数据,通常以UTF8的URL编码,避开字符冲突的问题;post模 式的参数直接当变量提交。)  
get传输的数据有大小限制,因为GET是通过URL提交数据,所以GET可提交的数据量就跟URL的长度有直接关系,通常,不同的浏览器对URL的长度的限制是不同的。Post请求则作为http消息的实际内容发送给服务器,Post没有限制提交的数据。Post请求也对应一个URL,在发起Post请求时,请求的是该URL中的网页数据。  
对于所述http请求指向的URL地址,本发明实施例支持URL地址的动态更新,即当网络数据有更新时,自动替换所述URL中与所述更新的网络数据对应的参数。  
步骤102:获取服务器响应所述http请求后返回的HTTP状态码。  
HTTP状态码(HTTP Status Code)是用以表示网页服务器HTTP响应状态的3位数字代码。它由 RFC 2616 规范定义的,并得到RFC 2518、RFC 2817、RFC 2295、RFC 2774、RFC 4918等规范扩展。  
一些常见的HTTP状态码为:  
200 :表示服务器成功返回网页;  
400 :表示错误请求;  
404 :表示请求的网页不存在;  
503 :表示服务不可用。 
步骤103:如果所述HTTP状态码表示所述服务器成功返回网页,则从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据。  
如果服务器返回的HTTP状态码为200(表示所述服务器成功返回网页)时,则从服务器中获取数据请求结果。由于网页数据的数据格式有多种,本发明实施例支持多种数据格式的解析。步骤103中的数据格式可以为jsp(Java ServerPages,Java服务器页面)格式、或xml(Extensible Markup Language,可扩展标记语言)格式、或json(JavaScript Object Notation,JavaScript对象符号)格式、或ajax(Asynchronous JavaScript and XML,异步JavaScript和XML)格式。  
步骤104:如果确定解析得到的网页数据的数据格式为错误格式,则发送 第一报警信息。  
在步骤104中,如果当前请求的网页数据的数据格式不是预期的正确格式,说明网页的数据格式异常,这时需要发送第一报警信息给对应的网络运维人员,以便网络运维人员及时发现错误并及时进行错误更正,其中,所述第一报警信息中可以包括所述URL地址、网页的错误数据格式和网页的正确数据格式等。  
为了便于理解,下面就jsp格式、xml格式、json格式、ajax格式这四种数据格式正确与否的判别进行举例:  
1、对于数据格式为jsp格式的网页,本发明实施例可以检测多个div、及多个table等类型的页面布局,支持按照页面标签的id(标识)或者class(组)等方式的检测。  
例1:对于一个网页中的部分内容,可通过id为aaa的div所展示的值来作为判断页面是否正常展示的标准。假设当id为aaa的div所展示的值为test时表示页面加载正常,则对于<div id=”aaa”>test</div>即为正确的数据格式。如果当前解析的网页数据的数据格式为<div id=”aaa”> </div>,这表示id为aaa的div没有所需的展示值test,这表明数据格式错误,页面会加载异常,此时需要发送第一报警信息。  
2、对于数据格式为json格式的网页,本发明实施例不但可以检测整个json串是否合法,也可检测子串是否合法。  
例2: json就是javascript中的对象和数组,其中,对象是一个无序的“‘名称/值’对”集合。譬如{“id” : 1,”name”:”张三”}是表示人的一个对象,该对象以“{”开始且以“}”结束,每个“名称”后跟一个“:”,“‘名称/值’对”之间使用“,”分隔。如果当前解析得到的网页数据的数据格式为{“id”:1;”name”:”张三”},由于中间的逗号写成了分号,就会导致用户请求的页面展示错误,所以,在判断数据格式正确与否时,会首先判断外面的“{ }”是否正确,再判断“{ }”内的格式是否正确,当检测到错误的分号时,需要发送第一报警信息。  
3、对于数据格式为xml格式的网页,本发明实施例可以对返回的xml结果的数据格式进行检测。  
例3:假设<?xml encoding=”utf-8”?><info><title>aaa</title></info> 应为网页的正确返回值;如果当前解析得到的网页数据的数据格式为<?xml encoding=”utf-8”?><info><title>aaa,其为网页的实际返回值,因为title和info标签都没有正常结束,所以可判定该返回值为错误返回值,需要发送第一报警信息。  
4、对于数据格式为ajax格式的网页,是针对HTTP请求返回的是jsp页面、页面中又调取了ajax来填充页面的网页,可以对返回的ajax结果的数据格式进行检测。  
例4:对于一个网页中的部分内容,可通过id为aaa的div所展示的值来作为判断页面是否正常展示的标准,如<div id=”aaa”> </div>,但这个div中的值,又是通过ajax技术实现的,那么就需要通过ajax异步请求得到ajax填充之后的结果,比如视频数据,如果结果不为空,表示数据格式正常,如果为空,表示数据格式异常(即会导致整个页面展示是有问题,接口出错),此时需要发送第一报警信息。  
在步骤104中,当解析得到的网页数据的数据格式为json或xml时,可以把解析出的json或xml格式的网页数据当做参数,传递给shell脚本,通过执行shell脚本,判断数据格式是否正确,并根据判断结果确定是否需要报警;当解析得到的网页数据的数据格式为jsp或ajax时,可通过java自定义函数处理解析得到的网页数据,通过java自定义函数,对解析得到的网页数据中jsp中的标签是否闭合、或所需标签是否有值进行判断,并根据判断结果确定是否需要报警。  
本发明实施例提供的网页数据格式检测方法,在向服务器发送http请求后,通过获取服务器返回的HTTP状态码来检测所述http请求是否被执行,即检测所述服务器是否成功返回网页;在确定服务器成功返回网页的基础上,可进一步从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据,进而对所请求的网页数据的数据格式的正确性进行判断,当判断结果为数据格式错误时,即可向运维人员发送报警信息,以便进行及时处理和优化,从而保证网页的正常显示。  
进一步地,针对不同的网页数据,根据实际需求,本发明实施例可采用以下两种方式中的一种进行网页数据格式的检测:  
方式一:固定频率检测方式,是指以固定的时间间隔进行重复检测,即以固定的时间间隔向服务器发送http请求。  
对于频繁更新资源的网页,网页内容处于动态变化的状态,为了保证网页内容的正确显示,需要及时了解网页动态以及时对网页错误进行处理,在这种情况下,可以选择固定频率检测方式,譬如,每间隔5分钟,向服务器发送一次http请求。  
方式二:固定时间检测方式,是指以固定的时间间隔进行重复检测,即在每天设定时刻向服务器发送http请求。  
对于网络资源比较稳定的网页,为了进一步维护网页内容的正确显示,可以选择固定时间检测方式,不必进行频繁检测,譬如,设定每天早上9点向服务器发送一次http请求。  
需要说明的是,一旦预设了检测方式,检测系统便会自动按照上述检测方式重复执行图1所示的检测流程。  
进一步地,基于上述检测方式,本发明实施例可根据服务器返回的HTTP状态码来提供报警,比如第一次HTTP请求,服务器返回的HTTP状态码不是正常码200,记录一次获取次数,此时不进行报警,在后续的检测过程中,还不能返回HTTP请求的正常码200,直到累计到预设的获取次数后才会进行报警。具体实现如下:  
如果依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页(即不是状态码200),则发送第二报警信息。  
进一步地,由于可能需要对多个网页数据进行检测,所以可同时控制多个检测装置运行,该检测装置支持UTF-8或者GBK格式等编码格式,每个检测装置用于执行图1所示的流程。由于每个检测装置所检测的网页数据会不同,所以可以预设不同的监控组(每个监控组对应有一个或多个网络运维人员的通讯方式),将检测装置与监控组进行绑定,当一个检测装置生成了报警信息后,就将该报警信息发送至与其绑定的监控组。  
进一步地,本发明实施例可新增检测装置、修改检测装置、删除检测装置、 查看检测装置的监控历史记录、禁用/启用检测装置等。  
进一步地,所述检测装置不但可执行图1所示检测流程,还可以对每个检测流程的耗时、是否成功运行进行记录,进而对多个检测流程进行分析,得出最长耗时,最短耗时,平均耗时,以及预设检测次数的成功率等统计信息。因为每个检测装置可运行图1所示流程的应用程序,该应用程序通用应用程序接口(Application Programming Interface,简称API)与服务器进行通信,所以在得到上述统计信息后,还可将上述统计信息发送给API的开发人员,以便API开发人员基于这些统计信息对API的性能、稳定性等方面做进一步的优化。  
参见图2,本发明实施例提供的网页数据格式检测装置200的结构示意图,该装置200具体包括:  
请求发送模块201,用于向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;  
状态码获取模块202,用于获取服务器响应所述请求发送模块201发送的http请求后返回的HTTP状态码;  
格式解析模块203,用于当所述状态码获取模块202获取的HTTP状态码表示所述服务器成功返回网页时,从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;  
第一报警信息发送模块204,用于当确定所述格式解析模块203解析得到的网页数据的数据格式为错误格式时,发送第一报警信息。  
其中,所述HTTP请求为数据获取请求或数据提交请求。  
其中,所述数据格式为jsp格式、或xml格式、或json格式、或ajax格式。  
其中,所述请求发送模块201,具体包括:  
第一发送单元,用于以固定的时间间隔向服务器发送http请求;  
第二发送单元,用于在每天设定时刻向服务器发送http请求。  
进一步地,所述装置200还包括:  
第二报警信息发送模块,用于在依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页时,发送第二报警信息。  
进一步地,所述装置200还包括:  
参数替换模块,用于当网络数据有更新时,替换所述URL中与所述更新的网络数据对应的参数。  
本发明实施例提供的网页数据格式检测装置,在向服务器发送http请求后,通过获取服务器返回的HTTP状态码来检测所述http请求是否被执行,即检测所述服务器是否成功返回网页;在确定服务器成功返回网页的基础上,可进一步从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据,进而对所请求的网页数据的数据格式的正确性进行判断,当判断结果为数据格式错误时,即可向运维人员发送报警信息,以便进行及时处理和优化,从而保证网页的正常显示。  
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到上述实施例方法中的全部或部分步骤可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者诸如媒体网关等网络通信设备,等等)执行本发明各个实施例或者实施例的某些部分所述的方法。  
需要说明的是,对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。  
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。  
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本 发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。  

Claims (12)

1.一种网页数据格式检测方法,其特征在于,包括:
向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;
获取服务器响应所述http请求后返回的HTTP状态码;
如果所述HTTP状态码表示所述服务器成功返回网页,则从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;
如果确定解析得到的网页数据的数据格式为错误格式,则发送第一报警信息。
2.根据权利要求1所述的方法,其特征在于,所述HTTP请求为数据获取请求或数据提交请求。
3.根据权利要求1所述的方法,其特征在于,所述数据格式为jsp格式、或xml格式、或json格式、或ajax格式。
4.根据权利要求1所述的方法,其特征在于,所述向服务器发送http请求,具体包括:
以固定的时间间隔向服务器发送http请求;
或,在每天设定时刻向服务器发送http请求。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
如果依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页,则发送第二报警信息。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述方法还包括:
当网络数据有更新时,替换所述URL中与所述更新的网络数据对应的参数。
7.一种网页数据格式检测装置,其特征在于,包括:
请求发送模块,用于向服务器发送超文本传输协议http请求,以向所述http请求指向的统一资源定位符URL地址请求网页数据;
状态码获取模块,用于获取服务器响应所述请求发送模块发送的http请求后返回的HTTP状态码;
格式解析模块,用于当所述状态码获取模块获取的HTTP状态码表示所述服务器成功返回网页时,从所述服务器获取携带所述网页数据的请求结果,并解析所述请求结果以得到对应数据格式的网页数据;
第一报警信息发送模块,用于当确定所述格式解析模块解析得到的网页数据的数据格式为错误格式时,发送第一报警信息。
8.根据权利要求7所述的装置,其特征在于,所述HTTP请求为数据获取请求或数据提交请求。
9.根据权利要求7所述的装置,其特征在于,所述数据格式为jsp格式、或xml格式、或json格式、或ajax格式。
10.根据权利要求7所述的装置,其特征在于,所述请求发送模块,具体包括:
第一发送单元,用于以固定的时间间隔向服务器发送http请求;
第二发送单元,用于在每天设定时刻向服务器发送http请求。
11.根据权利要求10所述的装置,其特征在于,所述装置还包括:
第二报警信息发送模块,用于在依次获取的HTTP状态码达到预设次数,且所述依次获取的HTTP状态码均表示所述服务器未成功返回网页时,发送第二报警信息。
12.根据权利要求7至11任一项所述的装置,其特征在于,所述装置还包括:
参数替换模块,用于当网络数据有更新时,替换所述URL中与所述更新的网络数据对应的参数。
CN201410037488.5A 2014-01-26 2014-01-26 一种网页数据格式检测方法及装置 Pending CN103729477A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410037488.5A CN103729477A (zh) 2014-01-26 2014-01-26 一种网页数据格式检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410037488.5A CN103729477A (zh) 2014-01-26 2014-01-26 一种网页数据格式检测方法及装置

Publications (1)

Publication Number Publication Date
CN103729477A true CN103729477A (zh) 2014-04-16

Family

ID=50453551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410037488.5A Pending CN103729477A (zh) 2014-01-26 2014-01-26 一种网页数据格式检测方法及装置

Country Status (1)

Country Link
CN (1) CN103729477A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104065725A (zh) * 2014-06-25 2014-09-24 北京思特奇信息技术股份有限公司 基于http超文本传送协议的系统实时监控方法及系统
CN105471942A (zh) * 2014-08-25 2016-04-06 小米科技有限责任公司 黄页信息的显示方法、装置及系统
CN105872090A (zh) * 2016-05-27 2016-08-17 四川长虹电器股份有限公司 基于扩展状态码的http通信方法
CN105912573A (zh) * 2016-03-30 2016-08-31 北京网康科技有限公司 数据更新方法及装置
CN106649531A (zh) * 2016-10-24 2017-05-10 福建中金在线信息科技有限公司 一种网页检测方法及装置
CN106789948A (zh) * 2016-11-30 2017-05-31 深圳市彬讯科技有限公司 一种网络web页面异常检测方法
CN107370806A (zh) * 2017-07-12 2017-11-21 北京京东尚科信息技术有限公司 Http状态码监控方法、装置、存储介质和电子设备
CN109740076A (zh) * 2018-12-28 2019-05-10 北京字节跳动网络技术有限公司 网页显示方法及装置
CN111782464A (zh) * 2020-06-22 2020-10-16 北京异乡旅行网络科技有限公司 一种网页动态异常监控方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7216256B2 (en) * 2004-03-30 2007-05-08 Bellsouth Intellectual Property Corporation Methods, systems, and products for verifying integrity of web-server served content
US20070174419A1 (en) * 2006-01-23 2007-07-26 O'connell Brian M JavaScript error determination and reporting
US20090089629A1 (en) * 2007-09-27 2009-04-02 Microsoft Corporation Capturing diagnostics in web browser applications
CN101578598A (zh) * 2006-10-30 2009-11-11 谷歌公司 用于常见标记问题的诊断和错误报告
CN103297291A (zh) * 2013-05-08 2013-09-11 携程计算机技术(上海)有限公司 网站实时状态监控方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7216256B2 (en) * 2004-03-30 2007-05-08 Bellsouth Intellectual Property Corporation Methods, systems, and products for verifying integrity of web-server served content
US20070174419A1 (en) * 2006-01-23 2007-07-26 O'connell Brian M JavaScript error determination and reporting
CN101578598A (zh) * 2006-10-30 2009-11-11 谷歌公司 用于常见标记问题的诊断和错误报告
US20090089629A1 (en) * 2007-09-27 2009-04-02 Microsoft Corporation Capturing diagnostics in web browser applications
CN103297291A (zh) * 2013-05-08 2013-09-11 携程计算机技术(上海)有限公司 网站实时状态监控方法及系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104065725A (zh) * 2014-06-25 2014-09-24 北京思特奇信息技术股份有限公司 基于http超文本传送协议的系统实时监控方法及系统
CN105471942A (zh) * 2014-08-25 2016-04-06 小米科技有限责任公司 黄页信息的显示方法、装置及系统
CN105912573A (zh) * 2016-03-30 2016-08-31 北京网康科技有限公司 数据更新方法及装置
CN105912573B (zh) * 2016-03-30 2019-12-27 北京网康科技有限公司 数据更新方法及装置
CN105872090A (zh) * 2016-05-27 2016-08-17 四川长虹电器股份有限公司 基于扩展状态码的http通信方法
CN105872090B (zh) * 2016-05-27 2019-05-07 四川长虹电器股份有限公司 基于扩展状态码的http通信方法
CN106649531A (zh) * 2016-10-24 2017-05-10 福建中金在线信息科技有限公司 一种网页检测方法及装置
CN106789948A (zh) * 2016-11-30 2017-05-31 深圳市彬讯科技有限公司 一种网络web页面异常检测方法
CN107370806A (zh) * 2017-07-12 2017-11-21 北京京东尚科信息技术有限公司 Http状态码监控方法、装置、存储介质和电子设备
CN109740076A (zh) * 2018-12-28 2019-05-10 北京字节跳动网络技术有限公司 网页显示方法及装置
CN111782464A (zh) * 2020-06-22 2020-10-16 北京异乡旅行网络科技有限公司 一种网页动态异常监控方法及系统
CN111782464B (zh) * 2020-06-22 2024-04-26 北京异乡旅行网络科技有限公司 一种网页动态异常监控方法及系统

Similar Documents

Publication Publication Date Title
CN103729477A (zh) 一种网页数据格式检测方法及装置
CN108628748B (zh) 自动化测试管理方法和自动化测试管理系统
CN109902247B (zh) 一种页面渲染的方法、装置及电子设备
US10979532B2 (en) Resource download method, electronic device, and apparatus
JP2019500680A (ja) データ処理方法及び装置
CN112181804A (zh) 一种参数校验方法、设备以及存储介质
EP3570170A1 (en) Error detection method and apparatus for transaction system, storage medium and computer device
CN111404937B (zh) 一种服务器漏洞的检测方法和装置
CN110908967B (zh) 用于存储日志的方法、装置、设备和计算机可读介质
AU2017237089B2 (en) Technologies for auto discover and connect to a rest interface
CN110958221A (zh) 动态检测xml外部实体注入漏洞的方法及装置
KR20200119176A (ko) 웹 트래픽 데이터를 처리 및 관리하는 시스템, 장치 및 방법
CN112380145A (zh) Sdk生成方法、装置、设备及可读存储介质
US10055269B2 (en) Additional message information handling for applications
CN111556080A (zh) 网络节点监控方法、装置、介质及电子设备
JP6779307B2 (ja) ページ表示のための方法及び装置
CN113364784B (zh) 检测参数生成方法、装置、电子设备及存储介质
US20200184386A1 (en) Systems to resolve shipment delays
US9201960B2 (en) Virtual agent response to customer inquiries
US10095791B2 (en) Information search method and apparatus
CN108829568A (zh) 一种数据监控方法及装置
CN112882948A (zh) 一种应用的稳定性测试方法、装置、系统及存储介质
CN111258904A (zh) 一种网页元素测试方法和相关装置
CN110968475A (zh) 监控网页的方法、装置、电子设备及可读存储介质
CN116662197A (zh) 一种接口自动化测试方法、系统、计算机和可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140416