CN103455478A - 加速网页访问的方法和装置 - Google Patents

加速网页访问的方法和装置 Download PDF

Info

Publication number
CN103455478A
CN103455478A CN2012101584010A CN201210158401A CN103455478A CN 103455478 A CN103455478 A CN 103455478A CN 2012101584010 A CN2012101584010 A CN 2012101584010A CN 201210158401 A CN201210158401 A CN 201210158401A CN 103455478 A CN103455478 A CN 103455478A
Authority
CN
China
Prior art keywords
url address
cache database
data cached
kernel
webpage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012101584010A
Other languages
English (en)
Inventor
关亮亮
刘峰
王瑞阳
钟杨
杨经宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN2012101584010A priority Critical patent/CN103455478A/zh
Priority to PCT/CN2013/075824 priority patent/WO2013174237A1/en
Priority to IN2366MUN2014 priority patent/IN2014MN02366A/en
Publication of CN103455478A publication Critical patent/CN103455478A/zh
Priority to US14/548,010 priority patent/US9922132B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G06F16/972—Access to data in other repository systems, e.g. legacy data or dynamic Web page generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种加速网页访问的方法和装置，属于网络领域。所述方法包括：获取用户发起的URL地址；判断所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；当判断出所述URL地址保存在预设的缓存数据库时，获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。本发明通过在浏览器端增加缓存数据库的实现逻辑，无论web服务器或代理服务器是否遵守http缓存协议，均可以起到加速访问的效果。

Description

加速网页访问的方法和装置
技术领域
本发明涉及网络领域，特别涉及一种加速网页访问的方法和装置。
背景技术
随着网络的发展，越来越多的人们依赖互联网获取信息，一般通过万维网(Web)服务的客户端浏览程序，向万维网(Web)服务器发送各种请求，并对从服务器发来的超文本信息和各种多媒体数据格式进行解释、显示和播放。
现有技术一通过http缓存技术实现加速网页访问，在浏览器和web服务器之间遵守http缓存协议，当浏览器访问相关URL（Uniform/Universal Resource Locator，统一资源定位符）时，如果本地缓存的数据没有过期，则浏览器就直接从本地获取数据完成网页访问，而不会向服务器发送http请求；如果本地缓存的数据已经过期，浏览器会将本地缓存的信息包含在http请求中发送给web服务器，web服务器判断数据没有改变时，则向浏览器返回一个指令，以使浏览器仍然从本地获取数据完成网页访问，web浏览器判断出数据改变时，则向浏览器返回相应的数据。
现有技术二通过CDN（Content Delivery Network，内容分发网络）技术实现加速网页访问，在访问网页时，尽可能避开互联网上有可能影响数据传输速度和稳定性的瓶颈和环节，因而访问网页的内容传输的更快、更稳定，因而用户可以就近访问到所需内容，避免了网络拥挤的同时提高了访问网站的响应速度。
在实现本发明的过程中，发明人发现现有技术至少存在以下问题：
现有技术一在复杂的网络环境下加速效果不理想，如当浏览器和web服务器之间通过代理服务器通信时会出现http缓存协议失效的情况；现有技术二在无法避开影响数据传输的瓶颈和环节的场景时，无法实现加速网页的访问。
发明内容
为了提高加速网页访问的效果，本发明实施例提供了一种加速网页访问的方法和装置。所述技术方案如下：
一方面，本发明实施例提供了一种加速网页访问的方法，所述方法包括：
获取用户发起的统一资源定位符URL地址；
判断所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；
当判断出所述URL地址保存在预设的缓存数据库时，则在所述缓存数据库中获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。
进一步地，所述获取用户发起的统一资源定位符URL地址之前，所述方法，还包括：
根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，所述N为大于1的整数；
获取所述N个URL地址对应的缓存数据，并将所述N个URL地址和对应的缓存数据保存在缓存数据库。
其中，所述数据采集程序中包括M个采集因子，所述M为大于1的整数；所述根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，具体包括：
判断每个网页的URL地址是否满足任一采集因子；
当所述网页的URL地址满足任一采集因子时，则获取所述URL地址。
其中，所述采集因子至少包括URL地址的更新次数、URL地址的更新时间和URL地址的验证码。
其中，所述在所述缓存数据库中获取所述URL地址对应的缓存数据，具体包括：
判断当前的浏览器内核是IE内核还是webkit内核；
当前的浏览器是IE内核时，则调用异步可插入协议，在所述缓存数据库中获取所述URL地址对应的缓存数据；
当前的浏览器是webkit内核时，则调用前置资源加载通知的接口，在所述缓存数据库中获取所述URL地址对应的缓存数据。
另一方面，本发明实施例提供了一种加速网页访问的装置，所述装置包括：
获取模块，用于获取用户发起的统一资源定位符URL地址；
判断模块，用于判断所述获取模块获取的所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；
处理模块，用于当所述判断模块的判断结果为是时，则在所述缓存数据库中获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。
进一步地，所述装置还包括采集模块和缓存数据库；
所述采集模块，用于根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，所述N为大于1的整数，并获取所述N个URL地址对应的缓存数据；
所述缓存数据库，用于保存所述采集模块采集的所述N个URL地址和对应的缓存数据。
其中，所述采集模块具体包括判断单元和采集单元；
所述判断单元，用于根据预设的数据采集程序包括的M个采集因子，判断每个网页的URL地址是否满足任一采集因子，所述M为大于1的整数；
所述采集单元，用于当所述判断单元的判断结果为所述网页的URL地址满足任一采集因子时，获取所述URL地址。
其中，所述采集因子至少包括URL地址的更新次数、URL地址的更新时间和URL地址的验证码。
其中，所述处理模块包括获取单元和处理单元；
所述获取单元，用于当所述判断模块的判断结果为是时，判断当前的浏览器内核是IE内核还是webkit内核；当前的浏览器是IE内核时，则调用异步可插入协议，在所述缓存数据库中获取所述URL地址对应的缓存数据；当前的浏览器是webkit内核时，则调用前置资源加载通知的接口，在所述缓存数据库中获取所述URL地址对应的缓存数据。
所述处理单元，用于处理所述缓存数据，渲染网页。
本发明实施例提供的技术方案带来的有益效果是：通过在浏览器端增加缓存数据库的实现逻辑，无论web服务器或代理服务器是否遵守http缓存协议，均可以起到加速访问的效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例1提供的加速网页访问的方法流程图；
图2是本发明实施例2提供的加速网页访问的方法流程图；
图3是本发明实施例3提供的加速网页访问的装置的结构示意图；
图4是本发明实施例3提供的加速网页访问的装置的另一结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
实施例1
参见图1，本发明实施例提供了一种加速网页访问的方法，所述方法包括：
101：获取用户发起的URL地址；
102：判断所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；
103：当判断出所述URL地址保存在预设的缓存数据库时，则在所述缓存数据库中获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。
本发明实施例提供的方法，通过在浏览器端增加缓存数据库的实现逻辑，无论web服务器或代理服务器是否遵守http缓存协议，均可以起到加速访问的效果。
实施例2
参见图2，本发明实施例提供了一种加速网页访问的方法，所述方法包括：
201：对多个网页进行采集获取URL地址，并获取URL地址对应的缓存数据，将URL地址和对应的缓存数据保存在缓存数据库。
对于该步骤，本发明实施例在浏览器端预设有缓存数据库，该缓存数据库中保存了一些URL地址和对应的缓存数据，根据该缓存数据即可实现网页访问。其中，缓存数据库中的保存哪些URL地址主要通过运营人员对大量的URL地址的分析，和在浏览器内置数据采集程序获得。
运营人员对大量的网页进行分析得到应该保存的URL地址，具体包括：运营人员对一些访问量很大的网站进行分析，得到这些网站中的背景图片等URL地址。实际应用中，运营人员分析URL地址的方式有很多，例如，可以分析某一URL地址在一段时间内是否有更新，当分析出某一URL地址在一段时间内没有更新时，则保存该URL地址；或，分析某一URL地址是否为静态网页或静态资源，当分析出某一URL地址为静态网页或静态资源的URL地址时，则保存该URL地址；或，分析连续访问某一URL地址时，该URL地址的验证码是否不变，若连续访问某一URL地址，服务器返回同一返回码时，则保存该URL地址。
根据浏览器内置的数据采集程序对多个网页进行采集获得应该保存的URL地址，具体包括：预设M个采集因子，将该采集因子设置在数据采集程序，并将该数据采集程序内置到浏览器中，由浏览器根据预设的采集因子对每次访问URL地址时的数据进行采集，例如，访问时间，页面大小和http返回码等数据，并将采集到的数据上报给服务器，由服务器进行统一分析后得到需要缓存的URL地址。
具体地，本发明实施例中预设的采集因子包括：URL地址在一定时间T内不会更新，T为经验值，实际应用中，可以以T=24小时进行采集URL地址；或，URL地址为静态网页或静态资源，例如，URL地址为html，image(jpeg,png)，css，js等；或，某一URL地址连续访问时，服务器返回同一返回码，表明服务器推荐缓存该URL地址对应的数据，实际应用中，该返回码可以为HTTP 304 Not Modified。
另外，根据预设的数据采集程序对多个网页进行采集时，具体为判断每个网页的URL地址是否满足任一采集因子，当网页的URL地址满足任一采集因子时，则获取URL地址，当网页的URL地址不满足任一采集因子时，则不对该URL地址做任何处理，也就是说该URL地址不必要保存在缓存数据库中。对网页进行采集的过程是不会去区分动态网页还是静态网页，因而本发明对于动态网页也能实现加速访问。
获得URL地址后，获取访问该URL地址时产生的数据，并将该URL地址和数据缓存到缓存数据库中，也就是说该缓存数据库中缓存的URL地址是经过运营人员分析或根据采集因子采集得到的应该保存的URL地址，此处应该保存的URL地址是指每次访问该URL地址不需要与服务器进行交互通信即可完成网页访问。而其他URL地址，如每次访问时产生的数据有变化的URL地址，每次访问该URL地址是需要与服务器进行通信交互的，这些URL地址是不会保存在缓存数据库中，属于本实施例中所述的不应该保存的URL地址。本实施例中设置采集因子对多个网页进行采集即是为了判断某URL地址是否应该保存在缓存数据库中。实际应用中，保存在缓存数据库的URL地址不止一个，本实施例设为根据预设的数据采集程序对多个网页进行采集，得到N个应该保存的URL地址，在缓存数据库中保存该N个URL地址和对应的缓存数据。
其中，缓存数据库中保存的数据内容如下表1所示，缓存数据库中缓存有每个URL地址及每个URL地址对应的缓存数据，另外，缓存数据库中还缓存有每个URL地址对应的缓存数据的md5值、URL地址的累计更新次数和上次更新URL地址的时间。其中，md5值是为了保证文件的正确性，防止别人盗用程序、加木马或者篡改版权，而设计的验证码。
表1缓存数据库中保存的数据内容
 URL地址
 URL地址对应的缓存数据
 缓存数据的md5值
 累计更新次数
 上次更新时间
202：获取用户发起的URL地址。
具体地，用户访问网页时，会在浏览器输入一个URL地址，浏览器接收到该URL地址后，根据该URL地址向服务器发送请求消息，服务器接收请求消息后，获取该URL地址对应的访问数据，并将该访问数据返回给浏览器。浏览器进而对该访问数据进行解释，渲染，将用户访问的网页显示给用户。
203：判断该URL地址是否保存在预设的缓存数据库，当判断出URL地址保存在预设的缓存数据库时，则执行步骤204；当判断出URL地址未保存在预设的数据库时，则执行步骤205。
其中，判断该URL地址是否保存在预设的缓存数据库具体为，判断该缓存数据库中是否存在URL地址对应的缓存数据；当存在该URL地址对应的缓存数据时，则判断出URL地址保存在预设的缓存数据库中，否则，则判断出URL地址保存在预设的缓存数据库中。
204：直接获取URL地址对应的缓存数据。
具体地，当用户发起的URL地址保存在预设的缓存数据库时，则根据URL地址和缓存数据的对应关系，在缓存数据库中获取该URL地址对应的缓存数据，因而浏览器对获取的该缓存数据进行处理，进而渲染网页，将渲染后的网页显示给用户，完成访问网页的过程。
本发明实施例通过预先在缓存数据库中保存了用户经常使用的网页或浏览器推荐的可以缓存的URL地址及对应的缓存数据，因而在用户发起的URL地址是缓存数据库中保存的URL地址时，可以直接在缓存数据库中获取该URL地址对应的缓存数据，进行处理后完成网页访问流程，而不需要再向服务器发起请求，也就不需要与服务器进行网络通信，尤其在网站服务的高峰期，避免出现大量请求无法及时响应的问题，影响访问速度的情况，实现了访问网页的加速过程。
优选地，本发明实施例还提供了浏览器内核为多核时的访问网页方式，不同的浏览器内核可以对应特定的URL地址，实现对网页的加速访问过程。本实施例的缓存机制与现有技术的浏览器内部支持的http协议缓存机制不同，本实施例的缓存机制包括两种实现方式：浏览器内核为IE内核或浏览器内核为webkit内核。
URL地址保存在预设的缓存数据库，且当浏览器内核为IE内核，IE内核访问指定URL地址时，通过异步可插入协议（Asynchronous Pluggable Protocols）在缓存数据库中获取URL地址对应的缓存数据，即直接返回相应的数据，无需发起网络请求。
URL地址保存在预设的缓存数据库，且当浏览器内核为webkit内核，webkit内核访问指定URL地址时，通过使用webkit内核提供的OnBeforeResourceLoad接口，即前置资源加载通知的接口，在缓存数据库中获取URL地址对应的缓存数据，即直接返回数据，不会发起网络请求。
另外，本实施例中还可以在浏览器端设置本地代理服务器，该本地代理服务器遵守http协议，能够实现网页的快速访问。在缓存数据库中获取URL地址对应的缓存数据时，具体为根据本地代理服务器进行获取URL地址对应的缓存数据，而不必使用IE内核提供的异步可插入协议和/或webkit内核提供的OnBeforeResourceLoad接口。
205：使用浏览器默认逻辑，向服务器发起http请求，获取http数据。
该步骤需要浏览器与服务器进行网络通信，浏览器向服务器发起http请求，服务器接收到该http请求后，根据该http请求获取该http请求对应的数据，并将该数据返回给浏览器，浏览器接收到http数据后，处理该http数据，渲染页面，完成访问网页的过程。
206：处理返回的数据，渲染网页。
具体地，浏览器在该步骤中使用现有的处理逻辑，对返回的数据进行处理，渲染网页，进将渲染后的网页显示给用户，完成访问网页的过程。
下面给出本发明的技术方案应用在如下的测试环境中得到的实际效果：
操作系统：windows 7，32位；CPU:AMD Phenom(tm)II，X4，830Processor 2.80GHz；内存：4.00GB；网络下载带宽：200kbps；
访问的URL地址为:http://cnc.i.gtimg.cn/qzone/space_item/orig/8/71800_top.jpg来测试本发明加速网页访问的效果，该URL是一个图片的网址，图片大小为91.2KB，使用QueryPerformanceCounter函数记录时间点，在没有加速的情况下访问12次，记录开始和结束的时间点，计算出未启动加速的用时，然后在启用加速的情况下访问12次，同样计算出启动加速时的用时，加速比=（未启动加速的用时-启动加速时的用时）/未启动加速的用时。
表2未启动加速和启动加速时访问同一URL地址的用时表
  未启动加速的用时   启动加速时的用时   加速比
  2920278   1085378   62.83%
  3517240   1142904   67.51%
  3256770   1125135   65.45%
  3047758   1109925   63.58%
  3158627   1122363   64.47%
  3456352   1089773   68.47%
  2775567   1352016   51.29%
  3345889   1111615   66.78%
  2765925   1080744   60.93%
  3397281   1092463   67.84%
  3149746   1124451   64.30%
  3354686   1104195   67.08%
根据上述表格可知，未启动加速的用时总和为38146119，而启动加速的用时总和为13540962，得到的平均加速比为64.50%。
本发明实施例提供的方法，通过在浏览器端增加缓存数据库的实现逻辑，无论web服务器或代理服务器是否遵守http缓存协议，均可以起到加速访问的效果。另外，对网页进行采集的过程是不会去区分动态网页还是静态网页，因而本发明对于动态网页也能实现加速访问。
实施例3
参见图3，本发明实施例提供了一种加速网页访问的装置，所述装置包括获取模块301、判断模块302和处理模块303；
获取模块301，用于获取用户发起的URL地址；
判断模块302，用于判断获取模块301获取的URL地址是否保存在预设的缓存数据库，缓存数据库中保存有多个URL地址与缓存数据的对应关系；
处理模块303，用于当判断模块302的判断结果为是时，则在缓存数据库中获取URL地址对应的缓存数据，并处理缓存数据，渲染网页。
进一步地，如图4所示，所述装置还包括采集模块304和缓存数据库305；
采集模块304，用于根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，N为大于1的整数，并获取N个URL地址对应的缓存数据；
缓存数据库305，用于保存采集模块304采集的N个URL地址和对应的缓存数据。
其中，采集模块304具体包括判断单元和采集单元；
判断单元，用于根据预设的数据采集程序包括的M个采集因子，判断每个网页的URL地址是否满足任一采集因子，M为大于1的整数；
采集单元，用于当判断单元的判断结果为网页的URL地址满足任一采集因子时，获取URL地址。
其中，采集因子至少包括URL地址的更新次数、URL地址的更新时间和URL地址的验证码。
其中，处理模块303包括获取单元和处理单元；
获取单元，用于当判断模块的判断结果为是时，判断当前的浏览器内核是IE内核还是webkit内核；当前的浏览器是IE内核时，则调用异步可插入协议，在缓存数据库中获取URL地址对应的缓存数据；当前的浏览器是webkit内核时，则调用前置资源加载通知的接口，在缓存数据库中获取URL地址对应的缓存数据。
处理单元，用于处理缓存数据，渲染网页。
本发明实施例提供的装置，通过在浏览器端增加缓存数据库的实现逻辑，无论web服务器或代理服务器是否遵守http缓存协议，均可以起到加速访问的效果。另外，对网页进行采集的过程是不会去区分动态网页还是静态网页，因而本发明对于动态网页也能实现加速访问。
需要说明的是：上述实施例提供的加速网页访问的装置在加速网页访问时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的加速网页访问的装置与加速网页访问的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种加速网页访问的方法，其特征在于，所述方法包括：
获取用户发起的统一资源定位符URL地址；
判断所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；
当判断出所述URL地址保存在预设的缓存数据库时，则在所述缓存数据库中获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。
2.如权利要求1所述的方法，其特征在于，所述获取用户发起的统一资源定位符URL地址之前，所述方法，还包括：
根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，所述N为大于1的整数；
获取所述N个URL地址对应的缓存数据，并将所述N个URL地址和对应的缓存数据保存在缓存数据库。
3.如权利要求2所述的方法，其特征在于，所述数据采集程序中包括M个采集因子，所述M为大于1的整数；所述根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，具体包括：
判断每个网页的URL地址是否满足任一采集因子；
当所述网页的URL地址满足任一采集因子时，则获取所述URL地址。
4.如权利要求3所述的方法，其特征在于，所述采集因子至少包括URL地址的更新次数、URL地址的更新时间和URL地址的验证码。
5.如权利要求1所述的方法，其特征在于，所述在所述缓存数据库中获取所述URL地址对应的缓存数据，具体包括：
判断当前的浏览器内核是IE内核还是webkit内核；
当前的浏览器是IE内核时，则调用异步可插入协议，在所述缓存数据库中获取所述URL地址对应的缓存数据；
当前的浏览器是webkit内核时，则调用前置资源加载通知的接口，在所述缓存数据库中获取所述URL地址对应的缓存数据。
6.一种加速网页访问的装置，其特征在于，所述装置包括：
获取模块，用于获取用户发起的统一资源定位符URL地址；
判断模块，用于判断所述获取模块获取的所述URL地址是否保存在预设的缓存数据库，所述缓存数据库中保存有多个URL地址与缓存数据的对应关系；
处理模块，用于当所述判断模块的判断结果为是时，则在所述缓存数据库中获取所述URL地址对应的缓存数据，并处理所述缓存数据，渲染网页。
7.如权利要求6所述的装置，其特征在于，所述装置还包括采集模块和缓存数据库；
所述采集模块，用于根据预设的数据采集程序对多个网页进行采集，以获取N个URL地址，所述N为大于1的整数，并获取所述N个URL地址对应的缓存数据；
所述缓存数据库，用于保存所述采集模块采集的所述N个URL地址和对应的缓存数据。
8.如权利要求7所述的装置，其特征在于，所述采集模块具体包括判断单元和采集单元；
所述判断单元，用于根据预设的数据采集程序包括的M个采集因子，判断每个网页的URL地址是否满足任一采集因子，所述M为大于1的整数；
所述采集单元，用于当所述判断单元的判断结果为所述网页的URL地址满足任一采集因子时，获取所述URL地址。
9.如权利要求8所述的装置，其特征在于，所述采集因子至少包括URL地址的更新次数、URL地址的更新时间和URL地址的验证码。
10.如权利要求6所述的装置，其特征在于，所述处理模块包括获取单元和处理单元；
所述获取单元，用于当所述判断模块的判断结果为是时，判断当前的浏览器内核是IE内核还是webkit内核；当前的浏览器是IE内核时，则调用异步可插入协议，在所述缓存数据库中获取所述URL地址对应的缓存数据；当前的浏览器是webkit内核时，则调用前置资源加载通知的接口，在所述缓存数据库中获取所述URL地址对应的缓存数据。
所述处理单元，用于处理所述缓存数据，渲染网页。
CN2012101584010A 2012-05-21 2012-05-21 加速网页访问的方法和装置 Pending CN103455478A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2012101584010A CN103455478A (zh) 2012-05-21 2012-05-21 加速网页访问的方法和装置
PCT/CN2013/075824 WO2013174237A1 (en) 2012-05-21 2013-05-17 Method and apparatus for speeding up web page access
IN2366MUN2014 IN2014MN02366A (zh) 2012-05-21 2013-05-17
US14/548,010 US9922132B2 (en) 2012-05-21 2014-11-19 Method and apparatus for speeding up web page access

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012101584010A CN103455478A (zh) 2012-05-21 2012-05-21 加速网页访问的方法和装置

Publications (1)

Publication Number Publication Date
CN103455478A true CN103455478A (zh) 2013-12-18

Family

ID=49623109

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012101584010A Pending CN103455478A (zh) 2012-05-21 2012-05-21 加速网页访问的方法和装置

Country Status (4)

Country Link
US (1) US9922132B2 (zh)
CN (1) CN103455478A (zh)
IN (1) IN2014MN02366A (zh)
WO (1) WO2013174237A1 (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104021204A (zh) * 2014-06-17 2014-09-03 贝壳网际（北京）安全技术有限公司 一种用于访问网页的方法及装置
CN104021203A (zh) * 2014-06-17 2014-09-03 贝壳网际（北京）安全技术有限公司 一种用于访问网页的方法及装置
CN104111829A (zh) * 2014-06-25 2014-10-22 小米科技有限责任公司 数据存储方法及装置
CN104202403A (zh) * 2014-09-10 2014-12-10 安一恒通（北京）科技有限公司 网页浏览的加速方法、云服务器和浏览器
CN104468807A (zh) * 2014-12-12 2015-03-25 北京小渔无限信息技术有限公司 进行网页缓存的处理方法、云端装置、本地装置及系统
CN104765742A (zh) * 2014-01-06 2015-07-08 阿里巴巴集团控股有限公司 一种信息展示的方法及装置
CN104980459A (zh) * 2014-04-04 2015-10-14 中国移动通信集团广东有限公司 一种应用程序运行的方法及站点接入设备
CN105100148A (zh) * 2014-05-09 2015-11-25 腾讯科技（北京）有限公司 一种浏览器获取文件的方法和代理服务器
CN105320687A (zh) * 2014-07-29 2016-02-10 腾讯科技（北京）有限公司 网页显示方法及装置
CN105634972A (zh) * 2016-01-29 2016-06-01 四川长虹电器股份有限公司 一种提高Web客户端访问效率的方法
CN105786844A (zh) * 2014-12-22 2016-07-20 金蝶软件（中国）有限公司 页面数据获取方法及装置
CN105808707A (zh) * 2016-02-29 2016-07-27 郑州悉知信息科技股份有限公司 数据处理方法、装置和电子商务平台
CN105930528A (zh) * 2016-06-03 2016-09-07 腾讯科技（深圳）有限公司 一种网页缓存的方法及服务器
CN105930538A (zh) * 2016-06-27 2016-09-07 北京奇虎科技有限公司 一种网页访问请求处理方法和服务器
CN106484633A (zh) * 2016-10-08 2017-03-08 广州华多网络科技有限公司 一种缓存数据的方法及装置
CN106528563A (zh) * 2015-09-11 2017-03-22 腾讯科技（深圳）有限公司 一种内容访问方法和装置
WO2017173803A1 (zh) * 2016-04-06 2017-10-12 中兴通讯股份有限公司 通信加速方法和装置
CN107329963A (zh) * 2016-04-29 2017-11-07 北京京东尚科信息技术有限公司 加速网页访问的方法和装置
CN107807993A (zh) * 2017-11-08 2018-03-16 山东浪潮商用系统有限公司 一种网页历史记录功能的实现方法及装置
CN108153783A (zh) * 2016-12-06 2018-06-12 腾讯科技（北京）有限公司 一种数据缓存的方法和装置
CN108600342A (zh) * 2018-03-30 2018-09-28 连尚（新昌）网络科技有限公司 一种消息显示方法、设备及存储介质
WO2019000722A1 (zh) * 2017-06-27 2019-01-03 武汉斗鱼网络科技有限公司 超文本标记语言网页加载方法及装置
CN109922368A (zh) * 2019-02-18 2019-06-21 青岛海信电器股份有限公司 一种基于网页页面的图片显示方法及智能电视
CN111767485A (zh) * 2019-04-01 2020-10-13 广州精选速购网络科技有限公司 一种网页展示方法、系统、电子设备及介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104994072B (zh) * 2015-05-28 2018-06-08 北京椒图科技有限公司 网站管理平台的访问方法及装置
CN107045501A (zh) * 2016-02-05 2017-08-15 腾讯科技（深圳）有限公司 一种网页访问方法和装置
US20180032491A1 (en) * 2016-07-26 2018-02-01 Google Inc. Web page display systems and methods
CN106294844A (zh) * 2016-08-19 2017-01-04 乐视控股（北京）有限公司 浏览器网页加载处理方法及装置
CN106844704A (zh) * 2017-02-04 2017-06-13 上海钱柳电子商务有限公司 用于处理页面数据的方法及用于处理页面数据的装置
CN107071007B (zh) * 2017-03-27 2020-09-08 武汉斗鱼网络科技有限公司 一种获取配置资源的方法、装置及客户端
CN107423367B (zh) * 2017-06-29 2020-11-10 北京五八信息技术有限公司 Web页面加载方法及装置
CN107465722B (zh) * 2017-07-04 2021-07-09 创新先进技术有限公司 Web访问的实现方法和装置
CN107766509B (zh) * 2017-10-23 2021-02-26 北京京东尚科信息技术有限公司 一种网页静态备份的方法和装置
CN109889493B (zh) * 2019-01-04 2021-08-13 上海七印信息科技有限公司 一种基于WebSocket协议的页面快速访问方法
CN110932987A (zh) * 2019-10-28 2020-03-27 苏宁云计算有限公司 用于流控url连接数的方法及装置
CN110912900B (zh) * 2019-11-27 2021-08-31 郑龙海 一种基于物联网的边界智能安防监控方法、装置及设备
CN116383537B (zh) * 2023-05-23 2023-09-08 飞狐信息技术（天津）有限公司 一种页面数据的预加载方法、装置、设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101221580A (zh) * 2008-01-03 2008-07-16 中兴通讯股份有限公司 一种提高嵌入式浏览器页面显示性能的方法
CN101640728A (zh) * 2009-06-15 2010-02-03 深圳市五巨科技有限公司 一种移动终端的服务页面快速访问装置和方法
CN101807180A (zh) * 2009-02-16 2010-08-18 宏达国际电子股份有限公司 移动电子装置及其网页的预处理及显示方法
CN102402518A (zh) * 2010-09-09 2012-04-04 中国移动通信有限公司 一种访问网页的方法及装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6769019B2 (en) * 1997-12-10 2004-07-27 Xavier Ferguson Method of background downloading of information from a computer network
JP3737779B2 (ja) * 2002-05-29 2006-01-25 富士通株式会社 翻訳サーバ、翻訳方法及びプログラム
JP2007513402A (ja) * 2003-11-06 2007-05-24 インテュウェーブ リミテッド 携帯電話機上のリソースへのセキュア・マルチエンティティ・アクセス
WO2008027503A2 (en) * 2006-08-31 2008-03-06 The Regents Of The University Of California Semantic search engine
US20100180005A1 (en) * 2009-01-12 2010-07-15 Viasat, Inc. Cache cycling
CN101964025B (zh) * 2009-07-23 2016-02-03 北京神州绿盟信息安全科技股份有限公司 Xss检测方法和设备
CN102331985B (zh) * 2010-07-12 2013-09-25 阿里巴巴集团控股有限公司 网页页面的分片嵌套缓存的处理方法和装置
CN102467565B (zh) * 2010-11-19 2016-05-11 北京奇虎科技有限公司 一种浏览器内核切换的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101221580A (zh) * 2008-01-03 2008-07-16 中兴通讯股份有限公司 一种提高嵌入式浏览器页面显示性能的方法
CN101807180A (zh) * 2009-02-16 2010-08-18 宏达国际电子股份有限公司 移动电子装置及其网页的预处理及显示方法
CN101640728A (zh) * 2009-06-15 2010-02-03 深圳市五巨科技有限公司 一种移动终端的服务页面快速访问装置和方法
CN102402518A (zh) * 2010-09-09 2012-04-04 中国移动通信有限公司 一种访问网页的方法及装置

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104765742A (zh) * 2014-01-06 2015-07-08 阿里巴巴集团控股有限公司 一种信息展示的方法及装置
CN104765742B (zh) * 2014-01-06 2019-06-18 阿里巴巴集团控股有限公司 一种信息展示的方法及装置
CN104980459B (zh) * 2014-04-04 2018-06-26 中国移动通信集团广东有限公司 一种应用程序运行的方法及站点接入设备
CN104980459A (zh) * 2014-04-04 2015-10-14 中国移动通信集团广东有限公司 一种应用程序运行的方法及站点接入设备
CN105100148B (zh) * 2014-05-09 2019-03-26 腾讯科技（北京）有限公司 一种浏览器获取文件的方法和代理服务器
CN105100148A (zh) * 2014-05-09 2015-11-25 腾讯科技（北京）有限公司 一种浏览器获取文件的方法和代理服务器
CN104021203B (zh) * 2014-06-17 2019-07-12 贝壳网际（北京）安全技术有限公司 一种用于访问网页的方法及装置
CN104021203A (zh) * 2014-06-17 2014-09-03 贝壳网际（北京）安全技术有限公司 一种用于访问网页的方法及装置
CN104021204A (zh) * 2014-06-17 2014-09-03 贝壳网际（北京）安全技术有限公司 一种用于访问网页的方法及装置
CN104111829A (zh) * 2014-06-25 2014-10-22 小米科技有限责任公司 数据存储方法及装置
CN105320687A (zh) * 2014-07-29 2016-02-10 腾讯科技（北京）有限公司 网页显示方法及装置
CN104202403B (zh) * 2014-09-10 2017-10-17 安一恒通（北京）科技有限公司 网页浏览的加速方法、云服务器和浏览器
CN104202403A (zh) * 2014-09-10 2014-12-10 安一恒通（北京）科技有限公司 网页浏览的加速方法、云服务器和浏览器
CN104468807A (zh) * 2014-12-12 2015-03-25 北京小渔无限信息技术有限公司 进行网页缓存的处理方法、云端装置、本地装置及系统
CN104468807B (zh) * 2014-12-12 2018-11-13 北京易网无际科技有限公司 进行网页缓存的处理方法、云端装置、本地装置及系统
CN105786844A (zh) * 2014-12-22 2016-07-20 金蝶软件（中国）有限公司 页面数据获取方法及装置
CN106528563A (zh) * 2015-09-11 2017-03-22 腾讯科技（深圳）有限公司 一种内容访问方法和装置
CN105634972A (zh) * 2016-01-29 2016-06-01 四川长虹电器股份有限公司 一种提高Web客户端访问效率的方法
CN105808707B (zh) * 2016-02-29 2019-04-26 郑州悉知信息科技股份有限公司 数据处理方法、装置和电子商务平台
CN105808707A (zh) * 2016-02-29 2016-07-27 郑州悉知信息科技股份有限公司 数据处理方法、装置和电子商务平台
WO2017173803A1 (zh) * 2016-04-06 2017-10-12 中兴通讯股份有限公司 通信加速方法和装置
CN107329963B (zh) * 2016-04-29 2020-02-07 北京京东尚科信息技术有限公司 加速网页访问的方法和装置
CN107329963A (zh) * 2016-04-29 2017-11-07 北京京东尚科信息技术有限公司 加速网页访问的方法和装置
CN105930528A (zh) * 2016-06-03 2016-09-07 腾讯科技（深圳）有限公司 一种网页缓存的方法及服务器
CN105930528B (zh) * 2016-06-03 2020-09-08 腾讯科技（深圳）有限公司 一种网页缓存的方法及服务器
CN105930538A (zh) * 2016-06-27 2016-09-07 北京奇虎科技有限公司 一种网页访问请求处理方法和服务器
CN106484633A (zh) * 2016-10-08 2017-03-08 广州华多网络科技有限公司 一种缓存数据的方法及装置
CN108153783A (zh) * 2016-12-06 2018-06-12 腾讯科技（北京）有限公司 一种数据缓存的方法和装置
CN108153783B (zh) * 2016-12-06 2020-10-02 腾讯科技（北京）有限公司 一种数据缓存的方法和装置
WO2019000722A1 (zh) * 2017-06-27 2019-01-03 武汉斗鱼网络科技有限公司 超文本标记语言网页加载方法及装置
CN107807993B (zh) * 2017-11-08 2021-06-15 山东云缦智能科技有限公司 一种网页历史记录功能的实现方法及装置
CN107807993A (zh) * 2017-11-08 2018-03-16 山东浪潮商用系统有限公司 一种网页历史记录功能的实现方法及装置
CN108600342A (zh) * 2018-03-30 2018-09-28 连尚（新昌）网络科技有限公司 一种消息显示方法、设备及存储介质
CN108600342B (zh) * 2018-03-30 2020-01-10 连尚（新昌）网络科技有限公司 一种消息显示方法、设备及存储介质
CN109922368A (zh) * 2019-02-18 2019-06-21 青岛海信电器股份有限公司 一种基于网页页面的图片显示方法及智能电视
CN111767485A (zh) * 2019-04-01 2020-10-13 广州精选速购网络科技有限公司 一种网页展示方法、系统、电子设备及介质

Also Published As

Publication number Publication date
US20150081835A1 (en) 2015-03-19
US9922132B2 (en) 2018-03-20
WO2013174237A1 (en) 2013-11-28
IN2014MN02366A (zh) 2015-08-14

Similar Documents

Publication Publication Date Title
CN103455478A (zh) 加速网页访问的方法和装置
US11032388B2 (en) Methods for prerendering and methods for managing and configuring prerendering operations
US10110695B1 (en) Key resource prefetching using front-end optimization (FEO) configuration
US10387521B2 (en) Creation and delivery of pre-rendered web pages for accelerated browsing
CN102438045B (zh) Web页面的预取方法、系统以及访问web页面的方法
CN107465707B (zh) 一种内容分发网络的内容刷新方法及装置
CN100562873C (zh) 获取网页中网页元素的系统及方法
CA2640025C (en) Methods and devices for post processing rendered web pages and handling requests of post processed web pages
US8775550B2 (en) Caching HTTP request and response streams
CN104798071A (zh) 在雾计算架构中使用边缘服务器改善网站性能
WO2006127750A1 (en) Method and system for object prediction
US7987243B2 (en) Method for media discovery
US9769285B2 (en) Access to network content
CN104063460A (zh) 一种在浏览器中加载网页的方法和装置
WO2018001124A1 (zh) 网页文件发送方法、网页渲染方法及装置、网页渲染系统
KR20160024293A (ko) 통신 시스템에서 페이지 로딩 시간 단축 방법 및 장치
CN103152367A (zh) 一种缓存的动态维护更新方法及系统
US20110066608A1 (en) Systems and methods for delivering targeted content to a user
CN111339456B (zh) 预加载方法和装置
US20140006918A1 (en) Method and system for web page rearrangement
CN109586942A (zh) 网站性能评定方法及装置
CN104615597A (zh) 浏览器中清除缓存文件的方法、装置和系统
WO2012119496A1 (zh) 预读方法和装置
Huang et al. Achieving fast page load for websites across multiple domains
CN110912769B (zh) Cdn缓存命中率统计方法、系统、网络设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1189957

Country of ref document: HK

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20131218

REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1189957

Country of ref document: HK