CN107070991A - 网络数据缓存装置与系统 - Google Patents

Abstract

本发明提供了一种网络数据缓存装置与系统，涉及网络数据交互处理领域。该网络数据缓存装置通过利用代理服务器依据第一网络数据请求携带的信息标识判断所述第一网络数据是否需要缓存；若需要缓存时，代理服务器依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存，当客户端或者其他的客户端再次向代理服务器发起第二网络数据请求时，在第二网络数据请求与所述第一网络数据匹配时，代理服务器将先前缓存的第一网络数据发送至所述另一客户端，从而不会造成大量的重复请求并且节省了流量，降低了用户浏览动态网络数据的成本，并且提高了用户在客户端浏览网页的速度，提高了用户的浏览体验感。

Description

网络数据缓存装置与系统

技术领域

本发明涉及网络数据交互处理领域，具体而言，涉及一种网络数据缓存装置与系统。

背景技术

随着社会的进步与科技的发展，互联网技术已经进入每现代人的生活中，人们常常利用手机或平板等智能终端的应用程序浏览网络数据，例如，利用微信、QQ、支付宝以及360浏览器等应用程序，给人们提供了信息浏览的窗口与平台，丰富了人们的日常生活。

现有技术中，用户在利用客户端安装的应用程序发起网络请求后，网络数据直接经过客户端或者浏览器发送到服务器端，中间没有做统一缓存处理，如遇到网络缓慢，甚至没有网络的情况下，将无法正常返回数据，客户体验感差，另外即使在网络较好的情况下，会造成大量的重复请求及流量浪费，从而导致用户浏览动态网络数据的成本很高。

发明内容

有鉴于此，本发明实施例的目的在于提供一种网络数据缓存装置与系统，以改善上述的问题。

第一方面，本发明实施例提供了一种网络数据缓存装置，所述网络数据缓存装置包括：

信息收发单元，用于接收客户端发送的第一网络数据请求，所述第一 网络数据请求携带有信息标识；

信息获取单元，用于依据所述第一网络数据请求向一业务服务器获取第一网络数据；

判断单元，用于依据所述信息标识判断所述第一网络数据是否需要缓存；

缓存单元，用于若需要缓存时，依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

第二方面，所述网络数据缓存系统包括客户端、代理服务器以及业务服务器，所述代理服务器分别与所述客户端、所述业务服务器建立通信连接，

所述客户端用于发送第一网络数据请求至所述代理服务器；

所述代理服务器用于接收客户端发送的第一网络数据请求，所述第一网络数据请求携带有信息标识；

所述代理服务器还用于依据所述第一网络数据请求向所述业务服务器获取第一网络数据；

所述代理服务器还用于依据所述信息标识判断所述第一网络数据是否需要缓存；

若需要缓存时，所述代理服务器还用于依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

与现有技术相比，本发明提供的一种网络数据缓存装置与系统，通过利用代理服务器依据第一网络数据请求携带的信息标识判断所述第一网 络数据是否需要缓存；若需要缓存时，代理服务器依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存，当客户端或者其他的客户端再次向代理服务器发起第二网络数据请求时，在第二网络数据请求与所述第一网络数据匹配时，代理服务器将先前缓存的第一网络数据发送至所述另一客户端，从而不会造成大量的重复请求并且节省了流量，降低了用户浏览动态网络数据的成本，并且提高了用户在客户端浏览网页的速度，提高了用户的浏览体验感。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例提供的代理服务器分别与业务服务器、客户端的交互示意图；

图2为本发明实施例提供的代理服务器的结构框图；

图3为本发明实施例提供的一种网络数据缓存装置的功能单元示意图。

图标：100-客户端；200-代理服务器；300-业务服务器；400-网络数据缓存装置；101-处理器；102-存储器；103-存储控制器；104-外设接口；301-信息收发单元；302-信息获取单元；303-判断单元；304-数据缓存单元；305-数据删除单元；306-数据更新单元。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明较佳实施例所提供的网络数据缓存装置400可应用于如图1所示的应用环境中。如图1所示，客户端100、代理服务器200以及业务服务器300位于网络中，其中，客户端100与代理服务器200通过内网进行交互，代理服务器200与业务服务器300通过外网进行交互。于本发明实施例中，客户端100中安装有至少一个应用程序(Application，APP)，与代理服务器200相对应，为用户提供服务。该代理服务器200可以是，但不限于，网络服务器、数据库服务器、云端服务器等等。该客户端100可以是，但不限于智能手机、个人电脑(personalcomputer，PC)、平板电脑、个人数字助理(personal digital assistant，PDA)、移动上网设备(mobile Internet device，MID)等。所述客户端100的操作系统可以是，但不限于，安卓(Android)系统、IOS(iPhone operating system)系统、Windows phone系统、Windows系统等。

图2示出了一种可应用于本发明实施例中的代理服务器200的结构框图。所述代理服务器200包括网络数据缓存装置400、存储器102、存储控制器103、处理器101以及外设接口104。

所述存储器102、存储控制器103及处理器101，各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述网络数据缓存装置400包括至少一个可以软件或固件(firmware)的形式存储于所述存储器102中或固化在所述客户端100的操作系统(operating system，OS)中的软件功能模块。所述处理器101用于执行存储器102中存储的可执行模块，例如，所述网络数据缓存装置400包括的软件功能模块或计算机程序。

其中，存储器102可以是，但不限于，随机存取存储器(Random Access Memory，RAM)，只读存储器102Read Only Memory，ROM)，可编程只读存储器(Programmable Read-Only Memory，PROM)，可擦除只读存储器(Erasable Programmable Read-Only Memory，EPROM)，电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory，EEPROM)等。其中，存储器102用于存储程序，所述处理器101在接收到执行指令后，执行所述程序，前述本发明实施例任一实施例揭示的流过程定义的服务端所执行的装置可以应用于处理器101中，或者由处理器101实现。

处理器101可能是一种集成电路芯片，具有信号的处理能力。上述的处理器101可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各装置、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器101也可以是任何常规的处理器101等。

外设接口104将各种输入/输出装置耦合至处理器101以及存储器102。在一些实施例中，外设接口104、处理器101以及存储控制器103可以在单个芯片中实现。在其他一些实例中，他们可以分别由独立的芯片实现。

可以理解，图2所示的结构仅为示意，代理服务器200还可包括比图2中所示更多或者更少的组件，或者具有与图2所示不同的配置。图2中所示的各组件可以采用硬件、软件或其组合实现。

请参阅图3，本发明实施例提供了一种网络数据缓存装置400，应用于代理服务器200，所述网络数据缓存装置400包括信息收发单元301、信息获取单元302、判断单元303、数据缓存单元304、数据删除单元305以及数据更新单元306。

所述信息收发单元301用于接收客户端100发送的第一网络数据请求，所述第一网络数据请求携带有信息标识。

具体地，用户可通过在客户端100的安装的应用程序，例如，QQ、微信、支付宝以及浏览器等，输入第一网络数据请求，此时客户端100发送第一网络数据请求至代理服务器200。本实施例中，通过修改发送对象的地址或修改互联网协议的host，在互联网协议中，host表示能够同其他机器互相访问的本地计算机。一台本地计算机有唯一标志代码，同网络掩码一起组成IP地址，如果通过点到点协议通过ISP访问互联网，那么在连接期间将会拥有唯一的IP地址，这段时间内，主机就是一个host。在这种情况下，host表示一个网络节点，host是根据TCP/IP for Windows的标准来工作的，它的作用是包含IP地址和Host name(主机名)的映射关系，是一个映射IP地址和Host name(主机名)的规定，规定要求每段只能包括一个映射关系，IP地址要放在每段的最前面，空格后再写上映射的Host name主机，当host修改后，其映射的ip地址也相应的改变。

所述信息获取单元302用于依据所述第一网络数据请求向一业务服务器300获取第一网络数据。

所述判断单元303用于依据所述信息标识判断所述第一网络数据是否需要缓存。

本实施例中，第一网络数据请求携带的信息标识，其中信息标识可以为URL地址或者param标签，URL地址WWW的统一资源定位标志，就是指网络地址。param标签为用于设置APPLET、EMBED或OBJECT元素的属性初始值，在一个<c:param>标签的name属性表示参数的名称，value属性表示的参数值，其中信息标识可以为name参数名称或value表示的参数值。通过识别信息标识即可识别到被请求的数据的属性，通过预先预设定的数据缓存策略，即可判断该被请求的数据是否需要缓存。

所述数据缓存单元304用于依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

具体地，缓存策略包括但不限于以下几种方式，第一种：

若需要缓存时，数据缓存单元304用于对第一网络数据进行缓存，数据删除单元305用于在预设定的第二时间后对缓存的第一网络数据进行删除。例如，在缓存1天后自动对第一网络数据进行删除。

第二种：

若需要缓存时，数据缓存单元304用于对第一网络数据进行缓存。

信息收发单元301还用于间隔预设定的第二时间向所述业务服务器300发送数据更新请求。

若在预设定的第三时间后接收到所述业务服务器300发送的更新后的第一网络数据时，数据更新单元306用于对缓存的第一网络数据进行更新。

其中，预设定的第二时间可以依据用户自身的需求而定，例如，10分钟，1小时甚至一天等等，在此并不做限制，这样当客户端100请代理服务器200请求第一网络数据时，可以获得最新的网络数据。

更进一步地，若在预设定的第三时间后，未接收到所述业务服务器300发送的更新后的第一网络数据时，信息收发单元301向另外的一个或多个代理服务器200发送数据更新请求。

所述信息收发单元301还用于接收其中一个代理服务器200发送的更新后的第一网络数据。

所述数据更新单元306还用于对缓存的第一网络数据进行数据更新。

需要说明的是，本实施例中，网络数据缓存装置400应用于网络数据缓存系统，网络数据缓存系统包括多个客户端100、多个代理服务器200以及多个业务服务器300，其中，每个代理服务器200分别与预设定数量的客户端100以及一个业务服务器300建立通信连接，并且各个代理服务器200之间建立通信连接，实现了缓存共享。

第三种：若需要缓存时，数据缓存单元304用于对第一网络数据进行缓存，且在存储容量超过预设定的阈值时，数据删除单元305用于按照先进先出或先进后出的原则缓存对第一网络数据进行删除。

例如，代理服务器200的存储容量为5G，当缓存的网络数据的超过5G时，可以按照先进先出的原则，将按照时间先后顺序将先缓存的网络 数据删除，以使代理服务器200的存储容量小于5G或按照按照时间先后顺序将后缓存的网络数据删除，以使代理服务器200的存储容量小于5G。

需要说明的是，缓存策略不仅仅可以为上述的几种方式，还可以利用Lru算法、Lfu算法、Llf算法以及Lcnr算法对需要缓存的网络数据进行缓存与处理，在此并不多做限制。

信息收发单元301还用于接收另一客户端发送的第二网络数据请求。

所述判断单元303还用于判断所述第二网络数据请求与所述第一网络数据是否匹配。

信息收发单元301还用于若第二网络数据请求与所述第一网络数据匹配时，将所述第一网络数据发送至所述另一客户端。

当第二网络数据请求与所述第一网络数据匹配时，说明另一客户端请求的网络数据为先前缓存的第一网络数据，此时代理服务器200无需再向业务服务器300请网络数据，直接将缓存的第一网络数据推送至另一客户端，从而节省了另一客户端的流量，降低了用户浏览动态网络数据的成本，并且提高了用户在客户端浏览网页的速度，提高了用户的浏览体验感。

计数单元用于对所述第一网络数据的请求次数进行一次计数。

判断单元303还用于判断在预设定的第一时间后，计数值是否低于预设定的频次阈值。

数据删除单元305还用于若计数值低于预设定的频次阈值，对该第一网络数据进行删除。

如果在预设定的第一时间后，计数值是否低于预设定的频次阈值，说明该网络数据被请求的频次低，数据的重要性等级低，因此可对请求频次 比较低的进行删除，以避免占内存。

请参阅图1，本发明实施例还提供了一种网络数据缓存系统，所述网络数据缓存系统包括客户端100、代理服务器200以及业务服务器300。所述代理服务器200分别与所述客户端100、所述业务服务器300建立通信连接。需要说明的是，本实施例所提供的网络数据缓存系统，其基本原理及产生的技术效果和上述实施例相同，为简要描述，本发明实施例部分未提及之处，可参考上述的实施例中相应内容。

所述客户端100用于发送第一网络数据请求至所述代理服务器200。

所述代理服务器200用于接收客户端100发送的第一网络数据请求，所述第一网络数据请求携带有信息标识。

所述代理服务器200还用于依据所述第一网络数据请求向所述业务服务器300获取第一网络数据。

所述代理服务器200还用于依据所述信息标识判断所述第一网络数据是否需要缓存。

所述代理服务器200还用于若需要对所述第一网络数据缓存时，依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

代理服务器200还与另一客户端进行数据交互，另一客户端用于发送第二网络数据请求至所述代理服务器200。

所述代理服务器200还用于接收另一客户端发送的第二网络数据请求。

所述代理服务器200还用于判断所述第二网络数据请求与所述第一网络数据是否匹配。

所述代理服务器200还用于若所述第二网络数据请求与所述第一网络数据匹配时，将所述第一网络数据发送至所述另一客户端。

步骤S410：所述代理服务器200还用于若所述第二网络数据请求与所述第一网络数据匹配时，对所述第一网络数据的请求次数进行一次计数。

所述代理服务器200还用于判断在预设定的第一时间后，计数值是否低于预设定的频次阈值。

所述代理服务器200还用于若计数值低于预设定的频次阈值时，对该第一网络数据进行删除。

综上所述，本发明提供的一种网络数据缓存装置与系统，通过利用代理服务器依据第一网络数据请求携带的信息标识判断所述第一网络数据是否需要缓存；若需要缓存时，代理服务器依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存，当客户端或者其他的客户端再次向代理服务器发起第二网络数据请求时，在第二网络数据请求与所述第一网络数据匹配时，代理服务器将先前缓存的第一网络数据发送至所述另一客户端，从而不会造成大量的重复请求并且节省了流量，降低了用户浏览动态网络数据的成本，并且提高了用户在客户端浏览网页的速度，提高了用户的浏览体验感。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和装置，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、装置和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所 述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述装置的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他 要素，或者是还包括为这种过程、装置、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、装置、物品或者设备中还存在另外的相同要素。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、装置、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、装置、物品或者设备中还存在另外的相同要素。

Claims (10)

1.一种网络数据缓存装置，其特征在于，所述网络数据缓存装置包括：

信息收发单元，用于接收客户端发送的第一网络数据请求，所述第一网络数据请求携带有信息标识；

信息获取单元，用于依据所述第一网络数据请求向一业务服务器获取第一网络数据；

判断单元，用于依据所述信息标识判断所述第一网络数据是否需要缓存；

缓存单元，用于若需要缓存时，依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

2.根据权利要求1所述的网络数据缓存装置，其特征在于，所述网络数据缓存装置还包括：

所述信息收发单元，还用于接收另一客户端发送的第二网络数据请求；

所述判断单元还用于判断所述第二网络数据请求与所述第一网络数据是否匹配；

所述信息收发单元还用于若第二网络数据请求与所述第一网络数据匹配时，将所述第一网络数据发送至所述另一客户端。

3.根据权利要求2所述的网络数据缓存装置，其特征在于，所述网络数据缓存装置还包括：

计数单元，用于若第二网络数据请求与所述第一网络数据匹配时，对所述第一网络数据的请求次数进行一次计数；

数据删除单元，用于若在预设定的第一时间后，计数值低于预设定的频次阈值时，对该第一网络数据进行删除。

4.根据权利要求1所述的网络数据缓存装置，其特征在于，所述网络数据缓存装置还包括：

数据缓存单元，用于在预设定的第二时间后对缓存的第一网络数据进行删除。

5.根据权利要求1所述的网络数据缓存装置，其特征在于，所述信息收发单元还用于间隔预设定的第二时间向所述业务服务器发送数据更新请求；

所述网络数据缓存装置还包括：

数据更新单元，用于若在预设定的第三时间后接收到所述业务服务器发送的更新后的第一网络数据时，对缓存的第一网络数据进行更新。

6.根据权利要求5所述的网络数据缓存装置，其特征在于，

若在预设定的第三时间后，未接收到所述业务服务器发送的更新后的第一网络数据时，所述信息收发单元还用于向另外的一个或多个代理服务器发送数据更新请求；

所述信息收发单元，还用于接收其中一个代理服务器发送的更新后的第一网络数据，并对缓存的第一网络数据进行数据更新。

7.根据权利要求1所述的网络数据缓存装置，其特征在于，所述网络数据缓存装置还包括：

数据删除单元，用于在存储容量超过预设定的阈值时，按照先进先出或先进后出的原则缓存对第一网络数据进行删除。

8.一种网络数据缓存系统，其特征在于，所述网络数据缓存系统包括客户端、代理服务器以及业务服务器，所述代理服务器分别与所述客户端、所述业务服务器建立通信连接，

所述客户端用于发送第一网络数据请求至所述代理服务器；

所述代理服务器用于接收客户端发送的第一网络数据请求，所述第一网络数据请求携带有信息标识；

所述代理服务器还用于依据所述第一网络数据请求向所述业务服务器获取第一网络数据；

所述代理服务器还用于依据所述信息标识判断所述第一网络数据是否需要缓存；

若需要缓存时，所述代理服务器还用于依据与所述信息标识关联的缓存策略对所述第一网络数据进行缓存。

9.根据权利要求8所述的网络数据缓存系统，其特征在于，所述代理服务器还与另一客户端进行交互，

所述另一客户端用于发送第二网络数据请求至所述代理服务器；

所述代理服务器还用于接收所述另一客户端发送的第二网络数据请求；

所述代理服务器还用于判断所述第二网络数据请求与所述第一网络数据是否匹配；

若第二网络数据请求与所述第一网络数据匹配时，所述代理服务器还用于将所述第一网络数据发送至所述另一客户端。

10.根据权利要求8所述的网络数据缓存系统，其特征在于，若第二网络数据请求与所述第一网络数据匹配时，所述代理服务器还用于对所述第一网络数据的请求次数进行一次计数；

若在预设定的第一时间后，计数值低于预设定的频次阈值时，所述代理服务器还用于对该第一网络数据进行删除。