CN107508903B - 一种网页内容的访问方法及终端设备 - Google Patents
一种网页内容的访问方法及终端设备 Download PDFInfo
- Publication number
- CN107508903B CN107508903B CN201710801757.4A CN201710801757A CN107508903B CN 107508903 B CN107508903 B CN 107508903B CN 201710801757 A CN201710801757 A CN 201710801757A CN 107508903 B CN107508903 B CN 107508903B
- Authority
- CN
- China
- Prior art keywords
- attribute information
- target
- webpage
- preset
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1441—Countermeasures against malicious traffic
- H04L63/1466—Active attacks involving interception, injection, modification, spoofing of data unit addresses, e.g. hijacking, packet injection or TCP sequence number attacks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明提供了一种网页内容的访问方法及终端设备。该方法包括:发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;发送对目标网站的网页元素访问请求至云端服务器,获得目标网站的预设网页元素的第二属性信息;提取第一目标网页内容中预设网页元素的第一属性信息;根据预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定预设网页元素中属性信息存在差异的目标网页元素;根据目标网页元素的第二属性信息,对第一目标网页内容中目标网页元素的第一属性信息进行更新;将更新后的第一目标网页内容进行加载显示。本发明能够解决终端设备访问的网页内容的HTTP劫持问题。
Description
技术领域
本发明涉及通信技术领域,尤其涉及一种网页内容的访问方法、终端设备以及计算机可读存储介质。
背景技术
目前,网络劫持越来越普遍,尤其是超文本传输协议(HTTP,HyperText TransferProtocol)劫持。
在使用HTTP协议通信的过程中,在用户的客户端与其要访问的服务器经过网络协议协调后,二者之间可以建立了一条专用的数据通道,用户端程序在系统中开放指定网络端口用于接收数据报文,服务器端将全部数据按指定网络协议规则进行分解打包,形成连续数据报文。用户端接收到全部报文后,按照协议标准来解包组合获得完整的网络数据。其中,传输过程中的每一个数据包都有特定的标签,表示其来源、携带的数据属性以及要到何处,所有的数据包经过网络路径中互联网服务提供商(ISP,Internet Service Provider)的路由器传输接力后,最终到达目的地,也就是客户端。
而HTTP劫持是在使用者与其目的网络服务所建立的专用数据通道中,监视特定数据信息,提示当满足设定的条件时,就会在正常的数据流中插入精心设计的网络数据报文,目的是让用户端程序解释“错误”的数据,并以弹出新窗口的形式在使用者界面展示宣传性广告。
举例来说,HTTP劫持可以在ISP的路由器节点上,设置协议检测,当用户端发送对某个目标网站(例如,HTTP://www.xxxx.com/sdsd.js)的访问请求时,协议检测发现是HTTP请求,就会对该HTTP请求进行拦截,然后将用户端所请求的正常的网页内容中插入js或dom节点(即广告代码),并作为该目标网站的网页内容返回至该客户端,以达到恶意推广的效果。这样,用户就在不知情的情况下,被恶意广告不停的骚扰,就算及时发现也只能靠用户向ISP的客服投诉,来减少网页访问的劫持次数。
由此可见,现有技术中针对网页内容的HTTP劫持并未提出有效的解决方案。
发明内容
本发明实施例提供一种网页内容的访问方法、终端设备以及计算机可读存储介质,以解决现有技术中无法对网页内容的HTTP劫持提出有效的解决方案的问题。
第一方面,本发明实施例提供了一种网页内容的访问方法,应用于终端设备,所述方法包括:
发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
将更新后的第一目标网页内容进行加载显示。
第二方面,本发明实施例还提供了一种终端设备,所述终端设备包括:
第一发送模块,用于发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
第二发送模块,用于发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
提取模块,用于提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
确定模块,用于根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
更新模块,用于根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
显示模块,用于将更新后的第一目标网页内容进行加载显示。
第三方面,本发明实施例还提供了一种终端设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的网页内容的访问程序,所述网页内容的访问程序被所述处理器执行时实现所述的网页内容的访问方法的步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有网页内容的访问程序,所述网页内容的访问程序被处理器执行时实现所述的网页内容的访问方法的步骤。
这样,本发明实施例通过从云端服务器获取目标网站的预设网页元素的第二属性信息,以及对终端设备访问的目标网站的第一网页内容提取预设网页元素的第一属性信息,并确定预设网页元素中第一属性信息和第二属性信息不同的目标网页元素,从而将第一网页内容中目标网页元素的第一属性信息更新为相应的第二属性信息,从而有效的解决了终端设备访问的网页内容的HTTP劫持问题,使用户能够访问到未被劫持的原始网页内容,净化用户的上网环境,并避免广告的恶意推广;而且,由于云端服务器的性能和带宽远高于终端设备,从而使得用户对网页内容的访问过程不会出现访问延迟的现象,不会影响用户的上网体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例的网页内容的访问方法的流程图;
图2是本发明一个实施例的网页内容的访问系统的流程图;
图3是本发明一个实施例的终端设备的框图;
图4是本发明一个实施例的移动终端的框图;
图5是本发明另一个实施例的移动终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1,示出了本发明一个实施例的网页内容的访问方法的流程图,应用于终端设备,所述方法具体可以包括如下步骤:
步骤101,发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
其中,终端设备包括移动终端(例如手机、平板电脑等)、个人电脑设备(即客户端)。
以手机为例,手机A的用户想要访问目标网站B,用户可以在浏览器中输入目标网站B的网址,并点击回车进行搜索。在搜索过程中首先需要将该目标网站B的域名发送至域名服务器(DNS,Domain Name Server)以请求该目标网站B的IP地址;然后,手机A在接收到该目标网站B的IP地址后就可以向网络中发起对该IP地址(指向目标网站B服务器)的HTTP访问请求,从而从目标网站B服务器接收到目标网站B的网页内容。
步骤102,发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息;
其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
其中,由于目标网站B服务器请求的网页内容容易发生HTTP劫持的情况,从而导致步骤101中得到的第一目标网页内容中存在广告代码。
这里,本发明实施例的方法利用了云端服务器,由于该云端服务器使用的是企业级带宽,收费高,网络环境更洁净,因此可以从硬件链路上保证其所访问的网页内容不会发生劫持。
其中,云端服务器同样可以对该目标网站B进行HTTP访问,从而得到第二目标网页内容(未发生HTTP劫持的原始网页内容),然后可以从该第二目标网页内容中提取预设网页元素的属性信息,那么当云端服务器接收到手机A发送的对所述目标网站B的网页元素访问请求时,就可以将该目标网站B的网页内容中预设网页元素的属性信息发送至手机A。
步骤103,提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
另一方面,在手机A接收到来自云端服务器的预设网页元素的第二属性信息后,手机A也可以从自己访问得到的第一目标网页内容中来提取该预设网页元素的第一属性信息。
其中,第一属性信息和第二属性信息对应的网页元素的属性是相同的,但属性的赋值可能存在差异,因此,这里以第一属性信息和第二属性信息来区分定义。
其中,在一个实施例中,步骤102先于步骤103执行,因为如果没有从云端服务器侧接收到目标网站正确的网页内容的预设网页元素的第二属性信息,则无法进行HTTP劫持的检测,也就无需进行步骤103,所以步骤102先于步骤103执行,以避免降低终端设备侧的数据处理效率。
步骤104,根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
其中,预设网页元素中可以包括一个或多个网页元素,例如包括网页元素1、网页元素2,来自云端服务器的网页元素1的属性1的赋值为1,来自云端服务器的网页元素2的属性2的赋值为2;来自手机的网页元素1的属性1的赋值为1,来自手机的网页元素2的属性2的赋值为3;由此可见,预设网页元素中属性的赋值存在差异的目标网页元素为网页元素2。
其中,如果所述预设网页元素中每个网页元素的第一属性信息和第二属性信息都是相同的,即不存在上述目标网页元素,那么可以说明,该手机访问的目标网站B的HTTP访问请求未被劫持,则可以直接结束流程。
步骤105,根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
继续举例来说,由于云端服务器侧访问得到的网页内容是未被劫持的,而现在步骤104中确定存在有属性信息不一致的目标网页元素,因此,可以确定手机侧访问的目标网站B发生了HTTP劫持,所以这里需要步骤101中得到的第一目标网页内容中网页元素2的属性2的赋值(即,3)更新为云端服务器的网页元素2的属性2的赋值(即2)。
其中,该网页元素2发生了HTTP劫持,这里通过更新成网页元素的相应属性的正确赋值,解决了HTTP劫持。
步骤106,将更新后的第一目标网页内容进行加载显示。
最后,可以将更新了目标网页元素的属性的赋值的第一目标网页内容进行加载显示,从而显示出没有HTTP劫持的广告的原始网页内容。
这样,本发明实施例通过从云端服务器获取目标网站的预设网页元素的第二属性信息,以及对终端设备访问的目标网站的第一网页内容提取预设网页元素的第一属性信息,并确定预设网页元素中第一属性信息和第二属性信息不同的目标网页元素,从而将第一网页内容中目标网页元素的第一属性信息更新为相应的第二属性信息,从而有效的解决了终端设备访问的网页内容的HTTP劫持问题,使用户能够访问到未被劫持的原始网页内容,净化用户的上网环境,并避免广告的恶意推广;而且,由于云端服务器的性能和带宽远高于终端设备,从而使得用户对网页内容的访问过程不会出现访问延迟的现象,不会影响用户的上网体验。
其中,在一个实施例中,所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
也就是说,终端设备侧在向云端服务器发送对目标网站B的网页元素访问请求时,会将目标网站B的IP地址以及自身的IP地址均发送至云端服务器。
那么所述云端服务器,用于在云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求(即,所述云端服务器利用所述终端设备的IP地址伪装成所述终端设备,来向目标网址服务器(即对目标网址的IP地址)发送HTTP访问请求),得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息(即上文的第二属性信息)发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
这样,本发明实施例的云端服务器通过对目标网站进行HTTP访问,从而可以得到未被拦截的网页内容,并从该网页内容中提取预设网页元素的属性信息,并将该预设网页元素的属性信息与该目标网站的IP地址关联存储,这样,可以便于终端设备侧对所其所访问的目标网站的预设网页元素的属性信息的快速获取。
可选地,在步骤104之后,根据本发明实施例的方法还包括:
将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器。
其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
也就是说,当经过步骤104,终端设备侧确定了其访问的网页内容中哪些网页元素的属性信息被篡改,那么为了便于云端服务器对恶意篡改的网页元素进行大数据分析,终端设备侧可以将被篡改的目标网页元素的第一属性信息以及对应的目标网站的IP地址发送至云端服务器,这样云端服务器就可以将该被篡改的目标网页元素的第一属性信息(即属性的被篡改后的赋值)存储至该目标网站IP地址对应的黑名单中。
这样,本发明实施例通过将终端设备侧访问的网页内容中的被篡改的第一数信息存储至云端服务器的目标网址的IP地址对应的黑名单中,使得当云端服务器收集到不同终端设备反馈的同一目标网站的被篡改的目标网页元素的属性信息时,就可以通过大数据分析来确定同一网站如果发生HTTP劫持,那么概率性的会出现在网页中的哪些位置,从而增加HTTP劫持的判断准确性。
其中,在一个实施例中,所述终端设备为终端设备集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
例如云端服务器集群包括位于北京的云端服务器、位于上海的云端服务器、位于新疆的云端服务器等等。而终端设备在北京有10万台,在上海有5万台,在新疆有3万台,而每个云端服务器都可以收集本地的不同终端设备所反馈的各个目标网站的被篡改的目标网页元素的属性信息;然后,不同地区的云端服务器所收集的信息又可以共享,从而实现不同地区的不同终端设备所反馈的各个目标网站的被篡改的目标网页元素的属性信息的收集,便于大数据分析。
其中,在一个实施例中,在执行步骤103时,可以通过以下方式来实现:
对所述第一目标网页内容进行解析;
例如对第一目标网页内容的html页面进行解析。
通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息;
这样,本发明实施例通过网页解析以及正则表达式提取属性信息,可以更加准确的获取网页内容中预设网页元素的属性信息。
可选地,在一个实施例中,所述预设网页元素包括以下至少之一:链接(例如url、js链接)、图片;所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
例如本实施例中的预设网页元素包括url链接、js链接、图片。
例如,可以通过正则表达式来确定第一目标网页内容中url链接的数量以及内容(即url链接的具体内容)、js链接的数量以及内容、图片的数量以及名称。
这样,本发明实施例可以对容易发生HTTP劫持的网页元素,例如广告链接、广告图片进行属性信息的提取,避免网页内容被增加商业广告界面和商业广告图片。
相应的,在执行步骤104时,例如云端服务器侧返回的目标网页内容的预设网页元素的第二属性信息包括:url链接2个,url链接1的内容为a,url链接2的内容为b;js链接3个,js链接1的内容为c,js链接2的内容为d,js链接3的内容为e;
终端设备从自己获取到的目标网页内容中提取到的预设网页元素的第一属性信息包括:url链接3个,url链接1的内容为a,url链接2的内容为b,url链接3的内容为k;js链接3个,js链接1的内容为c,js链接2的内容为d,js链接3的内容为e;
那么将云端服务器返回的url链接与终端设备侧提取的url链接的数量进行比对发现,终端设备侧的url链接多一个,再经过url链接内容的比对发现url链接3为被HTTP劫持而增加的链接,其内容k则是一个广告;而js链接经过数量的比对发现终端设备侧和云端服务器侧一致,再对内容进行对比也是完全一致,因此没有被篡改。所以,这里可以确定数量和内容存在差异的目标网页元素为url链接3。
这样,本发明实施例就可以根据链接、图片的数量和名称来快速检测到被篡改的网页元素,并将被篡改的网页元素的属性值更正为原始赋值,避免展示的网页内容中出现广告内容,净化上网环境。
参照图2,示出了本发明一个实施例的网页内容的访问系统的流程图,
该访问系统包括客户端、云端服务器。
该访问系统的数据处理流程包括客户端访问目标IP的流程、服务器对于目标网站IP的处理流程和客户端的处理流程。
客户端访问目标IP的流程:
S21,客户端A获取目标网站B的IP地址;
其中,用户可以在浏览器中输入目标网站B的网址,并点击回车进行搜索。在搜索过程中,客户端A首先会向DNS服务器发送DNS解析请求,该DNS解析请求中包括目标网站B的域名,DNS服务器对该DNS解析请求中的域名进行解析,得到该目标网站B的IP地址,并返回给客户端;
S22,客户端A向网络中发起对目标网站B的IP地址的HTTP请求,请求访问目标网站B的网页内容;
其中,客户端A在接收到该目标网站B的IP地址进行解析后,就可以向网络中发起对该IP地址(指向目标网站B服务器)的HTTP访问请求,而在目标网站B服务器发生了HTTP劫持,然后目标网站B服务器将劫持处理后的目标网站B的html内容返回至客户端A。
S23,客户端A发送目标网站B的IP地址和客户端A的IP地址至云端服务器。
其中,客户端A还会发送目标网站B的IP地址和客户端A的IP地址至云端服务器。
其中,向目标网站B服务器发送HTTP访问请求的S22和向云端服务器发送两个IP地址的S23可以先后执行也可以同时执行,本发明对它们的执行顺序并不做具体限制。
云端服务器对目标网站IP的处理流程:
S24,云端服务器在接收到访问目标网站B的IP后,会根据目标网站的IP地址在本地查找是否已存储了该目标网站B的特征集(即每个预设网页元素的属性信息);如果已存储,则直接返回该目标网站B的特征值,如果没有,则云端服务器利用该客户端A的IP地址,伪装成客户端A来对目标网站B的IP地址发送HTTP访问请求(也是向目标网站B服务器发送该请求),云端服务器接收到了目标网站B服务器返回的目标网址B的html内容后,对该html内容进行解析,然后通过正则表达式,获取网站当中的url、js链接的数量和内容以及图片的名称等特征内容(以特征集B1表示)。
S25,云端服务器将目标网站B的特征集B1返回给客户端A,同时把特征集B1记录到本地;
客户端A对特征集的处理流程:
S26,客户端A在收到了云端服务器返回的特征集B1后,就对目标网站B服务器返回的html内容进行解析和特征集提取(S24中云端服务器的解析和特征集提取流程,在此不再赘述),得到特征集B2;
S27,客户端A将云端服务器返回的特征集B1与本地解析得到的特征集B2中的每个特征进行对比。如果对比结果一致,则说明客户端A访问的目标网站B未发生HTTP劫持。如果对比结果不一致,则说明客户端A访问目标网站B时发生了HTTP劫持,则需要将特征集B2中与特征集B1的对比结果不一致的特征b3提取出来返回给云端服务器;
S28,客户端A则会将从目标网站B服务器返回的html内容中的目标特征替换为与特征集B1中对应的特征,其中,该目标特征为特征集B2中与特征集B1不同的特征部分,然后将替换特征后的html在浏览器中加载显示。用户在浏览网页的时候,将不会看到被劫持的广告部分内容。
S29,云端服务器在收到了特征b3后,就会将特征b3添加至对应该目标网站B的黑名单中。
这样,本发明实施例通过从云端服务器获取目标网站的预设网页元素的第二属性信息,以及对终端设备访问的目标网站的第一网页内容提取预设网页元素的第一属性信息,并确定预设网页元素中第一属性信息和第二属性信息不同的目标网页元素,从而将第一网页内容中目标网页元素的第一属性信息更新为相应的第二属性信息,从而有效的解决了终端设备访问的网页内容的HTTP劫持问题,使用户能够访问到未被劫持的原始网页内容,净化用户的上网环境,并避免广告的恶意推广;而且,由于云端服务器的性能和带宽远高于终端设备,从而使得用户对网页内容的访问过程不会出现访问延迟的现象,不会影响用户的上网体验。
参照图3,示出了本发明一个实施例的终端设备的框图。本发明实施例的终端设备能实现上述实施例的细节,并达到相同的效果。图3所示终端设备包括:
第一发送模块31,用于发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
第二发送模块32,用于发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
提取模块33,用于提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
确定模块34,用于根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
更新模块35,用于根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
显示模块36,用于将更新后的第一目标网页内容进行加载显示。
可选地,所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
所述云端服务器,用于在云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求,得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
可选地,所述终端设备还包括:
第三发送模块,用于将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器,其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
可选地,所述提取模块33包括:
解析子模块,用于对所述第一目标网页内容进行解析;
确定子模块,用于通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息。
可选地,所述预设网页元素包括以下至少之一:链接、图片;
所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
可选地,所述终端设备为终端设备集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
终端设备能够实现前述实施例中访问方法和访问系统实现的各个过程,为避免重复,这里不再赘述。
图4是本发明又一个实施例的移动终端的框图。图4所示的移动终端400包括:至少一个处理器401、存储器402、至少一个网络接口404和用户接口403。移动终端400中的各个组件通过总线系统405耦合在一起。可理解,总线系统405用于实现这些组件之间的连接通信。总线系统405除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图4中将各种总线都标为总线系统405。
其中,用户接口403可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器402可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DRRAM)。本发明实施例描述的系统和方法的存储器402旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器402存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作系统4021和应用程序4022。
其中,操作系统4021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序4022,包含各种应用程序,例如媒体播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序4022中。
在本发明实施例中,通过调用存储器402存储的程序或指令,具体的,可以是应用程序4022中存储的程序或指令,处理器401用于发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;提取所述第一目标网页内容中所述预设网页元素的第一属性信息;根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;将更新后的第一目标网页内容进行加载显示。
上述本发明实施例揭示的方法可以应用于处理器401中,或者由处理器401实现。处理器401可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器401中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器401可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器402,处理器401读取存储器402中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(Application Specific Integrated Circuits,ASIC)、数字信号处理器(Digital SignalProcessing,DSP)、数字信号处理设备(DSP Device,DSPD)、可编程逻辑设备(ProgrammableLogic Device,PLD)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地,所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
所述云端服务器,用于在云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求,得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
可选地,处理器401还用于:将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器,其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
可选地,处理器401还用于:对所述第一目标网页内容进行解析;通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息。
可选地,所述预设网页元素包括以下至少之一:链接、图片;
可选地,所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
所述移动终端为移动终端集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
移动终端400能够实现前述实施例中终端设备实现的效果,为避免重复,这里不再赘述。
图5是本发明另一个实施例的移动终端的结构示意图。具体地,图5中的移动终端500可以为手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)、或车载电脑等。
图5中的移动终端500包括射频(Radio Frequency,RF)电路510、存储器520、输入单元530、显示单元540、处理器560、音频电路570、WiFi(Wireless Fidelity)模块580和电源590。
其中,输入单元530可用于接收移动终端用户输入的数字或字符信息,以及产生与移动终端500的移动终端用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元530可以包括触控面板531。触控面板531,也称为触摸屏,可收集移动终端用户在其上或附近的触摸操作(比如移动终端用户使用手指、触笔等任何适合的物体或附件在触控面板531上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板531可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测移动终端用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器560,并能接收处理器560发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板531。除了触控面板531,输入单元530还可以包括其他输入设备532,其他输入设备532可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元540可用于显示由移动终端用户输入的信息或提供给移动终端用户的信息以及移动终端500的各种菜单界面。显示单元540可包括显示面板541,可选的,可以采用LCD或有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板541。
应注意,触控面板531可以覆盖显示面板541,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器560以确定触摸事件的类型,随后处理器560根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。
其中处理器560是移动终端500的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器521内的软件程序和/或模块,以及调用存储在第二存储器522内的数据,执行移动终端500的各种功能和处理数据,从而对移动终端500进行整体监控。可选的,处理器560可包括一个或多个处理单元。
在本发明实施例中,通过调用存储该第一存储器521内的软件程序和/或模块和/或该第二存储器522内的数据,处理器560用于发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;提取所述第一目标网页内容中所述预设网页元素的第一属性信息;根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;将更新后的第一目标网页内容进行加载显示。
可选地,所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
所述云端服务器,用于在云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求,得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
可选地,处理器560还用于:将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器,其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
可选地,处理器560还用于:对所述第一目标网页内容进行解析;通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息。
可选地,所述预设网页元素包括以下至少之一:链接、图片;
可选地,所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
所述移动终端为移动终端集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
可见,本发明实施例能够实现的前述实施例中终端设备实现的效果,为避免重复,这里不再赘述。
本发明实施例还提供了一种终端设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的网页内容的访问程序,所述网页内容的访问程序被所述处理器执行时实现所述网页内容的访问方法的步骤。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有网页内容的访问程序,所述网页内容的访问程序被处理器执行时实现所述的网页内容的访问方法的步骤。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (12)
1.一种网页内容的访问方法,其特征在于,应用于终端设备,所述方法包括:
发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
将更新后的第一目标网页内容进行加载显示;
所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
所述云端服务器,用于在云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求,得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
2.根据权利要求1所述的方法,其特征在于,所述根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素之后,所述方法还包括:
将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器,其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
3.根据权利要求1所述的方法,其特征在于,所述提取所述第一目标网页内容中所述预设网页元素的第一属性信息,包括:
对所述第一目标网页内容进行解析;
通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息。
4.根据权利要求1所述的方法,其特征在于,
所述预设网页元素包括以下至少之一:链接、图片;
所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
5.根据权利要求1所述的方法,其特征在于,所述终端设备为终端设备集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
6.一种终端设备,其特征在于,所述终端设备包括:
第一发送模块,用于发送对目标网站的HTTP访问请求至目标网站服务器,获得第一目标网页内容;
第二发送模块,用于发送对所述目标网站的网页元素访问请求至云端服务器,获得所述目标网站的预设网页元素的第二属性信息,其中,所述预设网页元素的第二属性信息为根据所述云端服务器预先获取的所述目标网站的第二目标网页内容而提取的预设网页元素的属性信息;
提取模块,用于提取所述第一目标网页内容中所述预设网页元素的第一属性信息;
确定模块,用于根据所述预设网页元素中每个网页元素的第一属性信息和第二属性信息,确定所述预设网页元素中属性信息存在差异的目标网页元素;
更新模块,用于根据所述目标网页元素的第二属性信息,对所述第一目标网页内容中所述目标网页元素的第一属性信息进行更新;
显示模块,用于将更新后的第一目标网页内容进行加载显示;
所述网页元素访问请求包括:所述目标网站的IP地址、所述终端设备的IP地址;
所述云端服务器,用于在所述云端服务器本地存储的所述预设网页元素的属性信息中,查找是否存在与所述目标网站的IP地址对应的预设网页元素的属性信息;
所述云端服务器,还用于若未查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则根据所述终端设备的IP地址对所述目标网站的IP地址发送HTTP访问请求,得到所述第二目标网页内容,并提取所述第二目标网页内容中所述预设网页元素的属性信息,并将所述预设网页元素的属性信息与所述目标网站的IP地址关联存储以及将所述预设网页元素的属性信息发送至所述终端设备;
所述云端服务器,还用于若查找到与所述目标网站的IP地址对应的所述预设网页元素的属性信息,则将所述预设网页元素的属性信息发送至所述终端设备。
7.根据权利要求6所述的终端设备,其特征在于,所述终端设备还包括:
第三发送模块,用于将所述目标网站的IP地址和所述目标网页元素的第一属性信息发送至所述云端服务器,其中,所述云端服务器,用于将所述目标网页元素的第一属性信息记录至所述目标网站的IP地址对应的黑名单。
8.根据权利要求6所述的终端设备,其特征在于,所述提取模块包括:
解析子模块,用于对所述第一目标网页内容进行解析;
确定子模块,用于通过正则表达式确定解析后的所述第一目标网页内容中的预设网页元素的第一属性信息。
9.根据权利要求6所述的终端设备,其特征在于,
所述预设网页元素包括以下至少之一:链接、图片;
所述预设网页元素的属性信息包括以下至少之一:数量、内容、名称。
10.根据权利要求6所述的终端设备,其特征在于,所述终端设备为终端设备集群,所述云端服务器为云端服务器集群,所述云端服务器集群中各个云端服务器存储的数据共享。
11.一种终端设备,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的网页内容的访问程序,所述网页内容的访问程序被所述处理器执行时实现如权利要求1至5中任一项所述的网页内容的访问方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有网页内容的访问程序,所述网页内容的访问程序被处理器执行时实现如权利要求1至5中任一项所述的网页内容的访问方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710801757.4A CN107508903B (zh) | 2017-09-07 | 2017-09-07 | 一种网页内容的访问方法及终端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710801757.4A CN107508903B (zh) | 2017-09-07 | 2017-09-07 | 一种网页内容的访问方法及终端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107508903A CN107508903A (zh) | 2017-12-22 |
CN107508903B true CN107508903B (zh) | 2020-06-16 |
Family
ID=60695251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710801757.4A Active CN107508903B (zh) | 2017-09-07 | 2017-09-07 | 一种网页内容的访问方法及终端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107508903B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108366058B (zh) * | 2018-02-07 | 2021-01-26 | 平安普惠企业管理有限公司 | 防止广告运营商流量劫持的方法、装置、设备及存储介质 |
CN108494728B (zh) * | 2018-02-07 | 2021-01-26 | 平安普惠企业管理有限公司 | 防止流量劫持的黑名单库创建方法、装置、设备及介质 |
CN108228282B (zh) * | 2018-04-04 | 2021-08-27 | 北京三快在线科技有限公司 | 用于网站页面加载的方法及装置 |
CN108683668B (zh) * | 2018-05-18 | 2021-01-22 | 腾讯科技(深圳)有限公司 | 内容分发网络中的资源校验方法、装置、存储介质及设备 |
CN110580318B (zh) * | 2018-05-21 | 2023-09-29 | 腾讯科技(深圳)有限公司 | 信息的展示方法、装置以及存储介质 |
CN108984673B (zh) * | 2018-06-30 | 2023-04-07 | 平安科技(深圳)有限公司 | 一种文件检测方法及装置 |
CN109040316B (zh) * | 2018-09-19 | 2021-08-27 | 天津字节跳动科技有限公司 | Http服务处理方法和装置 |
CN110619103A (zh) * | 2019-09-18 | 2019-12-27 | 珠海格力电器股份有限公司 | 网页图文检测方法、装置及存储介质 |
CN112016014B (zh) * | 2020-08-18 | 2023-12-26 | 北京达佳互联信息技术有限公司 | 网页显示、网页资源生成方法、装置、电子设备及介质 |
CN113779350A (zh) * | 2020-09-28 | 2021-12-10 | 北京沃东天骏信息技术有限公司 | 数据采集方法、装置、计算机系统和计算机可读存储介质 |
CN113656737B (zh) * | 2021-08-20 | 2024-05-14 | 北京百度网讯科技有限公司 | 网页内容展示方法、装置、电子设备以及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101510195A (zh) * | 2008-02-15 | 2009-08-19 | 刘峰 | 基于爬虫技术的网站安全防护与测试诊断系统构造方法 |
CN104462571A (zh) * | 2014-12-26 | 2015-03-25 | 北京奇虎科技有限公司 | 进行网页加载的方法、装置和浏览器客户端 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060080735A1 (en) * | 2004-09-30 | 2006-04-13 | Usa Revco, Llc | Methods and systems for phishing detection and notification |
CN101626368A (zh) * | 2008-07-11 | 2010-01-13 | 中联绿盟信息技术(北京)有限公司 | 一种防止网页被篡改的设备、方法和系统 |
CN102546253A (zh) * | 2012-01-05 | 2012-07-04 | 中国联合网络通信集团有限公司 | 网页防篡改方法、系统和管理服务器 |
CN102663060B (zh) * | 2012-03-30 | 2014-11-19 | 北京奇虎科技有限公司 | 一种识别被篡改网页的方法及装置 |
CN104346457A (zh) * | 2014-10-31 | 2015-02-11 | 北京奇虎科技有限公司 | 拦截业务对象的方法及浏览器客户端 |
-
2017
- 2017-09-07 CN CN201710801757.4A patent/CN107508903B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101510195A (zh) * | 2008-02-15 | 2009-08-19 | 刘峰 | 基于爬虫技术的网站安全防护与测试诊断系统构造方法 |
CN104462571A (zh) * | 2014-12-26 | 2015-03-25 | 北京奇虎科技有限公司 | 进行网页加载的方法、装置和浏览器客户端 |
Also Published As
Publication number | Publication date |
---|---|
CN107508903A (zh) | 2017-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107508903B (zh) | 一种网页内容的访问方法及终端设备 | |
US10667101B2 (en) | Contextual deep linking of applications | |
US20220014552A1 (en) | Detecting malicious behavior using an accomplice model | |
US9754113B2 (en) | Method, apparatus, terminal and media for detecting document object model-based cross-site scripting attack vulnerability | |
CN104978267B (zh) | 网页测试方法、终端及服务器 | |
CN107204989B (zh) | 广告拦截方法、终端、服务器和存储介质 | |
US20150058713A1 (en) | Method and apparatus for sharing media content and method and apparatus for displaying media content | |
US10095378B2 (en) | Web browser toolbar | |
US10796087B2 (en) | Method and apparatus for obtaining web content | |
US20140115539A1 (en) | Customized shortcuts for resource browsing method and apparatus | |
CN106789348B (zh) | 一种网络加速的方法、服务器及客户端 | |
US20140358877A1 (en) | Method and system handling images on a multi-touch device | |
CN104978358A (zh) | 桌面展示网页片段的方法及截取网页片段至桌面展示系统 | |
US20170169122A1 (en) | Webpage display method, mobile terminal, intelligent terminal, program and storage medium | |
CN112764857A (zh) | 信息处理方法、装置及电子设备 | |
US20140317712A1 (en) | Providing access to registered-user website | |
CN109145182B (zh) | 数据采集方法、装置、计算机设备及系统 | |
US20140157104A1 (en) | Dynamic sharing and updating of a web page | |
US9417773B2 (en) | Mobile application pre-fetching using a state framework | |
CN106339402B (zh) | 一种推荐内容推送的方法、装置及系统 | |
US11210453B2 (en) | Host pair detection | |
CN104156372A (zh) | 一种开启网页的方法、装置和系统 | |
CN110622135B (zh) | 在涉及欠佳网络条件的情形下提供内容项的系统和方法 | |
WO2012027772A1 (en) | A method of preparing a list of entity data and computer readable code, computers and systems adapted for displaying a list of entity data in a dynamic information pane | |
US20160087862A1 (en) | Identifying and transmitting performance information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |