CN105577620B - 一种超文本传输协议数据还原方法及装置 - Google Patents

一种超文本传输协议数据还原方法及装置 Download PDF

Info

Publication number
CN105577620B
CN105577620B CN201410548620.9A CN201410548620A CN105577620B CN 105577620 B CN105577620 B CN 105577620B CN 201410548620 A CN201410548620 A CN 201410548620A CN 105577620 B CN105577620 B CN 105577620B
Authority
CN
China
Prior art keywords
data
transfer protocol
hypertext transfer
record
uri
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410548620.9A
Other languages
English (en)
Other versions
CN105577620A (zh
Inventor
吴建新
朱柳辉
蒋宏斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201410548620.9A priority Critical patent/CN105577620B/zh
Priority to PCT/CN2015/081516 priority patent/WO2016058401A1/zh
Publication of CN105577620A publication Critical patent/CN105577620A/zh
Application granted granted Critical
Publication of CN105577620B publication Critical patent/CN105577620B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种超文本传输协议数据还原方法及装置,其中,该方法包括:接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录。本发明的方案使得用户能够直接在网页浏览器上浏览到待还原记录,处理方案简单,且还原效果好。

Description

一种超文本传输协议数据还原方法及装置
技术领域
本发明涉及通信技术领域,特别是涉及一种超文本传输协议数据还原方法及装置。
背景技术
随着互联网的普及以及中国宽带上网用户的爆发式增长,网络应用也在不断的增多,而浏览网页又是所有应用中使用率最高最普遍的应用。同时网络上信息的安全问题已经越来越被人们所重视,网络上绝大多数的不良信息是通过使用者在网页浏览器上打开各种不良网站这种方式传递的,网页浏览器和服务器之间都是通过超文本传输协议(http协议)来交换数据,因此,对http协议数据的还原有利于监控和识别这些不良信息。现有的一些网络信息监控方法可以通过检测敏感词来识别这些不良信息,但是识别出不良信息后还没有比较好的方法能直观的还原出使用者当时在浏览器上所看到内容。
现有的基于http的协议数据还原方法需要把获取到的http协议数据做深度解析,分析出数据的具体类型是超文本标记语言html、直译式脚本语言JS、级联样式表CSS或者图片等具体格式,再将这些数据保存成对应格式的文件,实际上是模仿网页浏览器保存网页的功能,由于不能像网页浏览器一样直接参与到http协议数据交互的过程,所以这种方法处理复杂而且还原的效果不好,对于一些复杂的网页效果就更差了。
发明内容
本发明的目的是提供一种超文本传输协议数据还原方法及装置,能够解决目前超文本传输协议数据还原方法复杂且还原效果不好的问题。
为了解决上述技术问题,本发明的实施例提供一种超文本传输协议数据还原方法,其中,包括:
接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录。
其中,在接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求之前,所述方法还包括:
接收用户从预先保存的多个待还原记录中选择的一待还原记录;
获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
其中,建立URI与记录数据的索引关系的步骤包括:
获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;
对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标符URI,并将所述URI和所述上行数据四元组信息保存至所述存储数据区;
根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据;
将所述记录数据保存至所述获取的存储所述上行数据四元组信息的存储数据区,并建立所述记录数据与所述URI的索引关系。
其中,所述根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据的步骤包括:
获取网页浏览器发送的携带有用户选择的待还原记录的URI的超文本传输协议请求数据;
对所述获取的超文本传输协议请求数据进行解析,获取所述携带有用户选择的待还原记录的URI的超文本传输协议请求数据中的上行数据四元组信息和所述待还原记录的URI;
根据所述上行数据四元组信息,查找存储所述上行数据四元组信息的存储数据区;
在查找到存储所述上行数据四元组信息的存储数据区后,获取与所述待还原记录的URI对应的待还原记录数据。
其中,所述根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区的步骤包括:
根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
其中,所述网页浏览器配置有具有预设IP地址和预设端口的代理服务器信息;
所述接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求的步骤包括:在所述预设IP地址和预设端口上,接收网页浏览器发送的所述超文本传输协议请求。
为了解决上述技术问题,本发明的实施例还提供一种超文本传输协议数据还原装置,其中,包括:
第一接收模块,用于接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
第一获取模块,用于对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
第二获取模块,用于根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
第一发送模块,用于将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录。
其中,所述超文本传输协议数据还原装置还包括:
第二接收模块,用于接收用户从预先保存的多个待还原记录中选择的一待还原记录;
第二发送模块,用于获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
其中,所述第二获取模块包括:
第一获取子模块,用于获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
第二获取子模块,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;
第三获取子模块,用于对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标符URI,并将所述URI和所述上行数据四元组信息保存至所述存储数据区;
第四获取子模块,用于根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据;
建立子模块,用于将所述记录数据保存至所述获取的存储所述上行数据四元组信息的存储数据区,并建立所述记录数据与所述URI的索引关系。
其中,所述第二获取模块还包括:
第四获取子模块,用于获取网页浏览器发送的携带有用户选择的待还原记录的URI的超文本传输协议请求数据;
第五获取子模块,用于对所述获取的超文本传输协议请求数据进行解析,获取所述携带有用户选择的待还原记录的URI的超文本传输协议请求数据中的上行数据四元组信息和所述待还原记录的URI;
查找子模块,用于根据所述上行数据四元组信息,查找存储所述上行数据四元组信息的存储数据区;
第六获取子模块,用于在查找到存储所述上行数据四元组信息的存储数据区后,获取与所述待还原记录的URI对应的待还原记录数据。
其中,所述第二获取子模块包括:
检索单元,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
获取单元,用于在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或
建立单元,用于在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
其中,所述网页浏览器配置有具有预设IP地址和预设端口的代理服务器信息;
所述第一接收模块包括:
接收单元,用于在所述预设IP地址和预设端口上,接收网页浏览器发送的所述超文本传输协议请求。
本发明的有益效果是:
本发明的方案采用预先建立记录的URI与记录数据的索引关系,在还原待还原记录时,网页浏览器生成携带待还原记录的URI的超文本传输协议请求,装置获取该请求中的URI,并通过URI与待还原记录数据的索引关系,获取待还原记录数据,并将该待还原记录数据转换成超文本传输协议响应数据返回该浏览器,使得该浏览器还原该待还原纪录。本方案使得用户能够直接在网页浏览器上浏览到待还原记录,处理方案简单,且还原效果好。
附图说明
图1表示本发明的超文本传输协议数据还原方法中http协议数据存储流程示意图;
图2表示图1中步骤12的流程示意图;
图3表示本发明的超文本传输协议数据还原方法中涉及到的模块的构成示意图;
图4表示本发明的具体实施例中URI与记录数据索引关系建立的流程示意图;
图5表示本发明的超文本传输协议数据还原方法中http协议数据还原流程示意图;
图6表示图5中的步骤51中超文本传输协议请求的产生流程示意图;
图7表示本发明的超文本传输协议数据还原方法中具体的http协议数据还原流程示意图;
图8表示本发明的超文本传输协议数据还原装置结构示意图一;
图9表示本发明的超文本传输协议数据还原装置结构示意图二;
图10表示本发明的超文本传输协议数据还原装置中第二获取模块的结构示意图一;
图11表示本发明的超文本传输协议数据还原装置中第二获取模块的结构示意图二;
图12表示本发明的超文本传输协议数据还原装置中第二获取子模块的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图以及具体的实施例对本发明进行详细描述。
本发明的超文本传输协议数据还原方法分为两个流程,分别是超文本传输协议数据(下文称http协议数据)存储流程和http协议数据还原流程,其中,还原流程的正确实施依赖于存储流程。
下面,将结合附图以及具体的实施例详细介绍一下http协议数据存储流程。
该http协议数据存储流程的目的是实现记录的URI与对应记录数据的索引关系,其中,该索引关系的建立,如图1所示,包括如下步骤:
步骤11,获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
步骤12,根据所述超文本传输协议请求数据中的上行数据四元组信息,或根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,获取用于存储所述上行数据四元组信息和所述下行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据;
步骤13,对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标识符URI,并将所述URI保存至所述存储数据区;
步骤14,将所述记录数据保存至所述存储数据区,并建立所述记录数据与所述URI的索引关系。
其中,上述步骤12,如图2所示,包括:
步骤21,根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
步骤22,在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
下面将结合附图以及更加详细的流程,对上述索引关系的建立做详细说明:
本专利方法处理的数据是http协议数据,在具体实施例中,结合图3,该http协议数据的来源主要有两种方式:
第一种:网络数据镜像方式
在由A01、A02、A03、A04所组成的网络中,A01表示网页服务器,提供http服务,A02表示广义的网络,一般是指符合TCP/IP协议所构成的网络。A03表示一些具体的网络设备如路由器、各层次的交换机等,A04表示装有网页浏览器的终端。A04使用网页浏览器,通过A03、A02等网络设备与A01交互实现网页数据的交互实现各种在线业务,如浏览网页,下载文件等。在A03的网络设备上有镜像输出网络报文的功能(A11是镜像源端口,A12是目的端口),可以将A03上与A04相连的网络端口数据通过A12端口镜像输出给A05网络数据输出模块,这是一种即时的方式。
第二种:网络数据保存方式
这种方式是在方式1的基础上,将A12输出的镜像通过网络抓包工具保存成抓包文件,通过A05读取抓包文件的方式来获得数据源,这是一种离线方式。
本专利描述的方法对于这两种方式的处理是一致的,下面以第一种方式对上述步骤11至步骤15作详细描述。
在图3中,终端(装有网页浏览器)与网页服务器之间交互的http协议数据,通过网络设备A03镜像转发,并通过A12镜像数据输出端口输出至网络数据分析模块A05。其中,该http协议数据包含了http协议请求数据和http协议响应数据。
其中,上述网络数据分析模块A05接收到的http协议数据为经过网页浏览器A04的系统被封装成的IP数据,该网络数据分析模块A05在接收到该IP数据之后执行如图4所示的步骤S01至步骤S03。
首先,介绍一下该网络数据分析模块的基本功能:该网络数据分析模块A05主要实现IP协议数据重组、传输控制协议(TCP协议)数据排序、http协议数据识别功能。
步骤S01,由于超过网络设备最大数据包大小MTU值的IP协议数据在通过网络设备传输过程中会被分片,所以该网络数据分析模块A05接收到的该IP协议数据为分片的数据后,首先根据该IP协议头部的标识字段(ip-id)、标志字段(ip-off的三个高位比特)和偏移字段(ip-off的13个低位比特)对IP协议数据进行重组;经过重组后形成一个完整的IP协议数据;
重组之后执行步骤S02,对重组之后的IP协议数据进行TCP协议数据排序的步骤:
经过步骤S01重组之后的IP协议数据,在网络传输过程中所经过的传输路径不同,因此按照先后顺序发送的IP协议数据在接收端不能保证是按照同样的顺序接收到,因此必须要对IP协议数据依据TCP协议进行排序处理:提取数据中的TCP部分,根据TCP协议头部的序列号Seq和确认字符Ack字段以及TCP协议来实现TCP协议数据的排序,排序完成后执行步骤S03;
步骤S03,进行http协议数据的识别:
处理经过步骤S02排序后的TCP协议数据,检查TCP协议数据的源端口和目的端口,如果有一个端口号为80则认为是http协议数据(包括http协议请求数据(或称上行数据)和http协议响应数据(或称下行数据)),并将整个http协议数据向http协议数据存储模块A06转发。
该http协议数据存储模块A06在接收到该网络数据分析模块A05转发的http协议数据后执行步骤S401至步骤S410。
首先,介绍一下该http协议数据存储模块A06的基本功能:该http协议数据存储模块A06主要功能是将网络数据分析模块A05输出的http协议数据进行进一步的分析并生成文件进行存储。该http协议数据存储模块A06管理一些数据存储区,数据存储区包含的主要字段有URI(多个)、下行数据文件名称(多个)、存储数据区索引号、四元组信息、建议URI与下行http协议数据文件名的索引关系、根据四元组信息查找存储数据区索引号等等。
步骤S401,该http协议数据存储模块A06提取该网络数据分析模块转发的http协议请求数据(上行数据或下行数据)的四元组信息(源IP、目的IP、源TCP端口、目的TCP端口),然后执行步骤S402;
步骤S402,根据上行(或下行)数据四元组信息查找是否存在用于存储该上行(或下行)数据四元组信息的存储数据区,若查找到用于存储该上行(或下行)数据四元组信息的存储数据区,则将该步骤S401中提取出来的上行(或下行)数据四元组信息保存至该存储数据区,若没有查找到,说明该提取到的上行(或下行)数据四元组信息为第一次进入该http协议数据存储模块A06,则执行步骤S403,为该提取到的四元组信息新建一个用于存储该上行数据四元组信息和对应的下行数据四元组信息的存储数据区;
然后执行步骤S404,将上述http协议数据分成两类来处理,一类是从网页浏览器A04发送至网页服务器A01的数据(目的TCP端口号为80),即上述的上行数据;另一类是网页服务器A01根据该上行数据发送给网页浏览器A04的数据(源TCP端口号为80),即下行数据;
如果是上行数据,则执行步骤S405,对上行数据进行解析,获取上行数据中的URI和上行数据的四元组信息,并执行S406,根据该上行数据四元组信息查找用于存储该上行数据四元组信息的存储数据区,并将所述URI和上述提取出来的上行数据四元组信息保存至上述查找到的存储数据区;
如果是下行数据,则执行步骤S407,提取下行数据中的http净荷数据(或称记录数据),然后执行步骤S408,新建一个文件,并将该提取到的http净荷数据保存在该文件中,并将文件的路径和名称写入到根据该下行数据中的与上述上行数据四元组对应的下行数据四元组信息查找到的、上述用于存储该上行数据四元组信息和对应的下行数据四元组信息的存储数据区中,然后执行步骤S409,使用上行数据中的上行数据四元组信息和URI产生一条记录,然后执行步骤S410,建立URI与存放下行http净荷数据文件的文件名的索引关系。
上述描述的是超文本传输协议数据存储流程的详细介绍,在索引关系建立之后,开始http协议数据的还原流程,具体描述如下:
如图5所示,该http协议数据还原流程包括如下步骤:
步骤51,接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
步骤52,对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
步骤53,根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
步骤54,将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录。
其中,该步骤51中描述的网页浏览器,可为上述提及的网页浏览器A04,步骤51至步骤54所执行的流程主要涉及如下几个模块:
http协议代理模块A08、http协议数据存储模块A06和http协议数据检索模块A07。其中,该http协议代理模块能够绑定一个IP地址和端口,并在这个IP和端口上接收网页浏览器的http协议数据请求,当然,该浏览器A04也应该相应配置有该http协议代理模块绑定的IP地址和端口。
在步骤51之前,如图6所示,还包括如下步骤:
步骤61,接收用户从预先保存的多个待还原记录中选择的一待还原记录;
步骤62,获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
在上述步骤61至步骤62之后执行上述步骤51至步骤54,下面将对上述步骤51至步骤54作详细说明:
结合图7,在网页浏览器A04上预先配置好该http协议代理模块绑定的IP地址和端口,在上述步骤61至步骤62(对应于图7中的步骤M01至步骤M02)之后,执行步骤M03:该http协议代理模块A08在该绑定的IP地址和端口上接收镜像浏览器A09发送的携带有用户选择的一待还原记录的统一资源标识符URI的http协议请求。然后执行步骤M04:将该http协议请求发送至http协议数据检索模块A07。然后执行M05:该http协议数据检索模块A07对该http协议请求进行解析,获取该http协议请求中的待还原记录的URI和上行数据四元组信息,然后根据该上行数据四元组信息获取存储该四元组信息的存储数据区,在查找到存储该上行数据四元组信息的存储数据区之后,根据预先建立的URI与存储记录数据文件名的索引关系,将该文件名返回http协议代理模块A08。然后执行步骤M06:该http协议代理模块A08接收该读取出的文件名。然后执行步骤M07:该http协议代理模块A08根据预先建立的URI与存储记录文件数据的文件的文件名的索引关系,去http协议数据存储模块A06去获取与该URI对应的待还原记录数据。然后执行步骤M08:该http协议代理模块A08将所述获取到的待还原记录数据转换成超文本传输协议响应数据。然后执行步骤M09:该http协议代理模块A08将该转换后的超文本传输协议响应数据发送至镜像网页浏览器A09,使得所述镜像网页浏览器A09根据所述超文本传输协议响应数据还原所述待还原记录。
综上,上述是对本发明的超文本传输协议数据还原方法的详细介绍,通过上述介绍可知,本发明的方案使得用户能够直接在网页浏览器上浏览到待还原记录,处理方案简单,且还原效果好。
如图8所示,本发明的实施例还提供一种超文本传输协议数据还原装置,其中,包括:
第一接收模块81,用于接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
第一获取模块82,用于对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
第二获取模块83,用于根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
第一发送模块84,用于将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录。
其中,如图9所示,该超文本传输协议数据还原装置还包括:
第二接收模块91,用于接收用户从预先保存的多个待还原记录中选择的一待还原记录;
第二发送模块92,用于获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
其中,如图10所示,该第二获取模块83包括:
第一获取子模块101,用于获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
第二获取子模块102,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;
第三获取子模块103,用于对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标符URI,并将所述URI和所述上行数据四元组信息保存至所述存储数据区;
第四获取子模块104,用于根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据
建立子模块105,用于将所述记录数据保存至所述获取的存储所述上行数据四元组信息的存储数据区,并建立所述记录数据与所述URI的索引关系。
其中,如图11所示,该第二获取模块83还包括:
第五获取子模块111,用于获取网页浏览器发送的携带有用户选择的待还原记录的URI的超文本传输协议请求数据;
第六获取子模块112,用于对所述获取的超文本传输协议请求数据进行解析,获取所述携带有用户选择的待还原记录的URI的超文本传输协议请求数据中的上行数据四元组信息和所述待还原记录的URI;
查找子模块113,用于根据所述上行数据四元组信息,查找存储所述上行数据四元组信息的存储数据区;
第七获取子模块114,用于在查找到存储所述上行数据四元组信息的存储数据区后,获取与所述待还原记录的URI对应的待还原记录数据。
其中,如图12所示,该第二获取子模块102包括:
检索单元121,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
获取单元122,用于在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或
建立单元123,用于在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
其中,所述网页浏览器配置有具有预设IP地址和预设端口的代理服务器信息;
该第一接收模块81包括:
接收单元,用于在所述预设IP地址和预设端口上,接收网页浏览器发送的所述超文本传输协议请求。
需要说明的是,该装置是包括上述方法的装置,上述方法的实施例的实现方式适用于该装置的实施例中,也能达到相同的技术效果。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种超文本传输协议数据还原方法,其特征在于,包括:
接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录;
其中,在接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求之前,所述方法还包括:
接收用户从预先保存的多个待还原记录中选择的一待还原记录;
获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
2.根据权利要求1所述的超文本传输协议数据还原方法,其特征在于,建立URI与记录数据的索引关系的步骤包括:
获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;
对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标符URI,并将所述URI和所述上行数据四元组信息保存至所述存储数据区;
根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,查询用于存储所述上行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据;
将所述记录数据保存至所述获取的存储所述上行数据四元组信息的存储数据区,并建立所述记录数据与所述URI的索引关系。
3.根据权利要求2所述的超文本传输协议数据还原方法,其特征在于,所述根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据的步骤包括:
获取网页浏览器发送的携带有用户选择的待还原记录的URI的超文本传输协议请求数据;
对所述获取的超文本传输协议请求数据进行解析,获取所述携带有用户选择的待还原记录的URI的超文本传输协议请求数据中的上行数据四元组信息和所述待还原记录的URI;
根据所述上行数据四元组信息,查找存储所述上行数据四元组信息的存储数据区;
在查找到存储所述上行数据四元组信息的存储数据区后,获取与所述待还原记录的URI对应的待还原记录数据。
4.根据权利要求2所述的超文本传输协议数据还原方法,其特征在于,所述根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区的步骤包括:
根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
5.权利要求1所述的超文本传输协议数据还原方法,其特征在于,
所述网页浏览器配置有具有预设IP地址和预设端口的代理服务器信息;
所述接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求的步骤包括:在所述预设IP地址和预设端口上,接收网页浏览器发送的所述超文本传输协议请求。
6.一种超文本传输协议数据还原装置,其特征在于,包括:
第一接收模块,用于接收网页浏览器发送的携带有一待还原记录的统一资源标识符URI的超文本传输协议请求;
第一获取模块,用于对所述超文本传输协议请求进行解析,获取所述超文本传输协议请求中的所述待还原记录的URI;
第二获取模块,用于根据预先建立的URI与记录数据的索引关系,获取与所述待还原记录的URI对应的待还原记录数据;
第一发送模块,用于将所述获取到的待还原记录数据转换成超文本传输协议响应数据发送至所述网页浏览器,使得所述网页浏览器根据所述超文本传输协议响应数据还原所述待还原记录;
其中,所述超文本传输协议数据还原装置还包括:
第二接收模块,用于接收用户从预先保存的多个待还原记录中选择的一待还原记录;
第二发送模块,用于获取所述接收的待还原记录的统一资源标识符URI,并将所述URI发送给网页浏览器,以使所述网页浏览器根据所述URI发起所述超文本传输协议请求。
7.根据权利要求6所述的超文本传输协议数据还原装置,其特征在于,所述第二获取模块包括:
第一获取子模块,用于获取网络设备镜像转发的终端与网页服务器之间交互的超文本传输协议数据,所述超文本传输协议数据包括超文本传输协议请求数据和超文本传输协议响应数据;
第二获取子模块,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;
第三获取子模块,用于对所述超文本传输协议请求数据进行解析,获取所述超文本传输协议请求数据中的统一资源标符URI,并将所述URI和所述上行数据四元组信息保存至所述存储数据区;
第四获取子模块,用于根据所述超文本传输协议响应数据中的与所述上行数据四元组信息对应的下行数据四元组信息,获取用于存储所述上行数据四元组信息的存储数据区;其中,所述超文本传输协议响应数据为与所述URI对应的记录数据;
建立子模块,用于将所述记录数据保存至所述获取的存储所述上行数据四元组信息的存储数据区,并建立所述记录数据与所述URI的索引关系。
8.根据权利要求7所述的超文本传输协议数据还原装置,其特征在于,所述第二获取模块还包括:
第五获取子模块,用于获取网页浏览器发送的携带有用户选择的待还原记录的URI的超文本传输协议请求数据;
第六获取子模块,用于对所述获取的超文本传输协议请求数据进行解析,获取所述携带有用户选择的待还原记录的URI的超文本传输协议请求数据中的上行数据四元组信息和所述待还原记录的URI;
查找子模块,用于根据所述上行数据四元组信息,查找存储所述上行数据四元组信息的存储数据区;
第七获取子模块,用于在查找到存储所述上行数据四元组信息的存储数据区后,获取与所述待还原记录的URI对应的待还原记录数据。
9.根据权利要求7所述的超文本传输协议数据还原装置,其特征在于,所述第二获取子模块包括:
检索单元,用于根据所述超文本传输协议请求数据中的上行数据四元组信息,对存储所述上行数据四元组信息的存储数据区进行检索;
获取单元,用于在检索到存储所述上行数据四元组信息的存储数据区时,获取所述存储数据区;或
建立单元,用于在未检索到存储所述上行数据四元组信息的存储数据区时,建立一存储所述上行数据四元组信息的存储数据区。
10.根据权利要求6所述的超文本传输协议数据还原装置,其特征在于,所述网页浏览器配置有具有预设IP地址和预设端口的代理服务器信息;
所述第一接收模块包括:
接收单元,用于在所述预设IP地址和预设端口上,接收网页浏览器发送的所述超文本传输协议请求。
CN201410548620.9A 2014-10-16 2014-10-16 一种超文本传输协议数据还原方法及装置 Active CN105577620B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410548620.9A CN105577620B (zh) 2014-10-16 2014-10-16 一种超文本传输协议数据还原方法及装置
PCT/CN2015/081516 WO2016058401A1 (zh) 2014-10-16 2015-06-16 一种超文本传输协议数据还原方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410548620.9A CN105577620B (zh) 2014-10-16 2014-10-16 一种超文本传输协议数据还原方法及装置

Publications (2)

Publication Number Publication Date
CN105577620A CN105577620A (zh) 2016-05-11
CN105577620B true CN105577620B (zh) 2019-12-03

Family

ID=55746087

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410548620.9A Active CN105577620B (zh) 2014-10-16 2014-10-16 一种超文本传输协议数据还原方法及装置

Country Status (2)

Country Link
CN (1) CN105577620B (zh)
WO (1) WO2016058401A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111382378B (zh) * 2018-12-28 2023-04-25 北京字节跳动网络技术有限公司 一种资源加载方法、装置、移动终端及存储介质
CN110839060B (zh) * 2019-10-16 2022-02-01 武汉绿色网络信息服务有限责任公司 一种DPI场景中http多会话的文件还原方法和装置
CN112398863A (zh) * 2020-11-19 2021-02-23 全知科技(杭州)有限责任公司 一种tcp长连接非完整流量的数据分析方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1350249A (zh) * 2001-12-04 2002-05-22 上海复旦光华信息科技股份有限公司 远程用户操作过程记录和还原的方法
CN1997030A (zh) * 2006-12-13 2007-07-11 武汉虹旭信息技术有限责任公司 用于http数据还原的方法
CN101827068A (zh) * 2009-03-02 2010-09-08 中国移动通信集团公司 一种业务场景还原方法与装置
CN101887463A (zh) * 2010-07-22 2010-11-17 北京天融信科技有限公司 一种基于虚拟域的http还原展示方法
CN102098328A (zh) * 2010-12-10 2011-06-15 华为技术有限公司 超文本传输协议http流关联方法和设备
CN102098331A (zh) * 2010-12-29 2011-06-15 北京锐安科技有限公司 一种还原web类应用内容的方法及其系统
CN102882703A (zh) * 2012-08-31 2013-01-16 赛尔网络有限公司 一种基于http分析的url自动分类分级的系统及方法
CN103491089A (zh) * 2013-09-22 2014-01-01 北京锐安科技有限公司 一种基于http的数据还原中的转码方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101867932B (zh) * 2010-05-21 2012-11-28 武汉虹旭信息技术有限责任公司 一种基于移动互联网的有害信息过滤系统及其方法
CN102833111B (zh) * 2012-08-30 2015-10-07 北京锐安科技有限公司 一种可视化http数据监管方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1350249A (zh) * 2001-12-04 2002-05-22 上海复旦光华信息科技股份有限公司 远程用户操作过程记录和还原的方法
CN1997030A (zh) * 2006-12-13 2007-07-11 武汉虹旭信息技术有限责任公司 用于http数据还原的方法
CN101827068A (zh) * 2009-03-02 2010-09-08 中国移动通信集团公司 一种业务场景还原方法与装置
CN101887463A (zh) * 2010-07-22 2010-11-17 北京天融信科技有限公司 一种基于虚拟域的http还原展示方法
CN102098328A (zh) * 2010-12-10 2011-06-15 华为技术有限公司 超文本传输协议http流关联方法和设备
CN102098331A (zh) * 2010-12-29 2011-06-15 北京锐安科技有限公司 一种还原web类应用内容的方法及其系统
CN102882703A (zh) * 2012-08-31 2013-01-16 赛尔网络有限公司 一种基于http分析的url自动分类分级的系统及方法
CN103491089A (zh) * 2013-09-22 2014-01-01 北京锐安科技有限公司 一种基于http的数据还原中的转码方法及系统

Also Published As

Publication number Publication date
WO2016058401A1 (zh) 2016-04-21
CN105577620A (zh) 2016-05-11

Similar Documents

Publication Publication Date Title
CN103179132B (zh) 一种检测和防御cc攻击的方法及装置
CN102361484B (zh) 被动网络性能测量系统及其页面识别方法
CN104268082B (zh) 浏览器的压力测试方法和装置
CN102655481B (zh) 一种基于网页的即时通信聊天内容查看方法及系统
AU2012363126B2 (en) Terminal device and user information synchronization method
CN101355587B (zh) Url信息获取方法和装置及搜索引擎实现方法及系统
CN112822167B (zh) 异常tls加密流量检测方法与系统
CN102857369B (zh) 一种网站日志保存系统及方法和装置
CN102868719A (zh) 一种基于缓存的网络访问方法和服务器
CN107124430A (zh) 页面劫持监控方法、装置、系统和存储介质
CN108959539B (zh) 一种基于规则可配置的网页数据解析方法
CN105577620B (zh) 一种超文本传输协议数据还原方法及装置
CN107766509A (zh) 一种网页静态备份的方法和装置
CN102523296B (zh) 无线网页浏览资源优化方法、装置及系统
CN106582013B (zh) 游戏服务系统、用于向在线的游戏更新数据的方法和装置
CN112364355A (zh) 主动发现分布式自建系统与扫描安全漏洞的方法
EP2479683A1 (en) Method, apparatus and system for generating bookmarks
WO2015123990A1 (zh) 一种页面推送方法、装置、服务器和系统
CN103067389A (zh) 基于短网址的高安全性文件传输方法
KR102423039B1 (ko) 대용량 네트워크 모니터링을 위한 실시간 패킷 데이터 저장 방법 및 장치
CN103957252B (zh) 云储存系统的日志获取方法及其系统
CN103227815B (zh) 控制浏览器缓存的方法及装置
CN108011936A (zh) 用于推送信息的方法和装置
CN103167554B (zh) 网关流量压缩处理方法与装置、网络服务提供系统
US10164819B2 (en) Correlating web traffic events to a web page session

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant