CN108259528A - 一种资源缓存方法及装置 - Google Patents

一种资源缓存方法及装置 Download PDF

Info

Publication number
CN108259528A
CN108259528A CN201611238373.8A CN201611238373A CN108259528A CN 108259528 A CN108259528 A CN 108259528A CN 201611238373 A CN201611238373 A CN 201611238373A CN 108259528 A CN108259528 A CN 108259528A
Authority
CN
China
Prior art keywords
destination server
resource
sent
message
domain name
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611238373.8A
Other languages
English (en)
Other versions
CN108259528B (zh
Inventor
张强
程凌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201611238373.8A priority Critical patent/CN108259528B/zh
Publication of CN108259528A publication Critical patent/CN108259528A/zh
Application granted granted Critical
Publication of CN108259528B publication Critical patent/CN108259528B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/16—Threshold monitoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/45—Network directories; Name-to-address mapping
    • H04L61/4505—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0227—Filtering policies
    • H04L63/0236—Filtering by address, protocol, port number or service, e.g. IP-address or URL
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Abstract

本申请公开了一种资源缓存方法及装置，包括：网络设备获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值；所述网络设备若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。

Description

一种资源缓存方法及装置
技术领域
本申请涉及通信技术领域，尤其涉及一种资源缓存方法及装置。
背景技术
互联网超文本传输协议(Hyper Text Transport Protocol，HTTP)缓存产品需要对互联网大量的HTTP资源进行缓存，从而可以减少冗余的数据传输，减轻服务器的负担，加快客户端加载网页的速度。
现有技术中，对互联网资源可缓存性分析的方法，仅仅是通过以下一种或多种方式来进行分析：对黑名单域名过滤；对关键字过滤；对流量镜像以及策略路由(PolicyBased Routing,PBR)直路场景进行判断；对域名系统(Domain Name System，DNS)直路场景进行判断；对本省互联网数据中心(Internet Data Center，IDC)进行判断、对黑白名单端口拨测是否可用进行判断。
举例来说，将正在分析的域名与配置的黑名单域名进行比较，如果黑名单域名包括所述正在分析的域名，则认为正在分析的域名中的资源不可缓存；将正在分析的域名与配置的关键字进行比较，如果正在分析的域名中包括配置的关键字，则认为正在分析的域名中的资源不可缓存；判断正在分析的域名是否为旁路，若不是旁路，则认为正在分析的域名中的资源不可缓存等等。
上述方法只是对域名的最外层信息进行分析，因此可靠性不高，导致过滤后的域名还需要人工进行进一步确认。
发明内容
本申请实施例提供一种资源缓存方法及装置，用以提高缓存互联网资源的准确性。
第一方面，本申请实施例提供一种资源缓存方法，包括：
网络设备获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值；
所述网络设备若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
根据本申请实施例提供的方法，网络设备通过目标域名的解析数据确定目标域名对应的综合权重值，从而在所述综合权重值大于或等于第一预设阈值时，缓存所述目标服务器中的资源。由于上述方法中，解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性，因此，网络设备最终是否缓存目标服务器中的资源，是依赖于上下行链路中报文的缓存属性，从而可以获得可靠性较高的结果，提高缓存互联网资源的准确性。
可选的，所述方法还包括：
所述网络设备若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
可选的，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
可选的，所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值，包括：
所述网络设备根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
所述网络设备将确定出的一项或多项权重值的累加和作为所述综合权重值。
可选的，所述预设类型的资源包括以下一种或多种类型：
视频类型的资源；图片类型的资源；网页类型的资源；下载类型的资源。
可选的，所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值之前，还包括：
所述网络设备确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
第二方面，提供一种资源缓存装置，包括：
收发单元，用于获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
处理单元，用于根据所述解析数据确定所述目标域名对应的综合权重值；若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
可选的，所述处理单元还用于：
若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
可选的，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
可选的，所述处理单元具体用于：
根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
将确定出的一项或多项权重值的累加和作为所述综合权重值。
可选的，所述处理单元还用于：
确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
第三方面，提供一种资源缓存装置，包括：
收发器，用于获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
处理器，用于根据所述解析数据确定所述目标域名对应的综合权重值；若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
可选的，所述处理器还用于：
若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
可选的，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
可选的，所述处理器具体用于：
根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
将确定出的一项或多项权重值的累加和作为所述综合权重值。
可选的，所述处理器还用于：
确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
第四方面，本申请实施例提供了一种计算机存储介质，用于储存为上述第二方面提供的资源缓存装置所用的计算机软件指令，其包含用于执行上述第一方面所设计的程序。
第五方面，本申请实施例提供了一种计算机存储介质，用于储存为上述第四方面提供的基站所用的计算机软件指令，其包含用于执行上述第二方面或第三方面所设计的程序。
附图说明
图1为适用于本申请实施例的一种网络结构示意图；
图2为本申请实施例提供的一种资源缓存方法流程示意图；
图3为本申请实施例提供的一种资源缓存方法流程示意图；
图4为本申请实施例提供的一种资源缓存装置结构示意图；
图5为本申请实施例提供的一种资源缓存装置结构示意图。
具体实施方式
以下，对本申请中的部分用语进行解释说明，以便于本领域技术人员理解。
1)终端，又称之为用户设备(User Equipment，UE)，是一种向用户提供语音和/或数据连通性的设备，例如，具有无线连接功能的手持式设备、车载设备等。常见的终端例如包括：手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device，MID)、可穿戴设备，例如智能手表、智能手环、计步器等。
2)Cache(缓存)，用于加速用户网络，提高用户体验，减少运营商网间结算。Cache一般分为旁路和直路2种。
3)旁路，将用户的上行获取(get)请求报文镜像到重定向服务器，重定向服务器分析get请求报文所请求的资源是否被缓存服务器缓存，如果被缓存，则向用户发一个302报文，Loaction为缓存服务器的IP，否则放行用户的上行请求。
4)PBR直路，交换机配置上下行策略路由，将80端口的上行请求和下行请求的下一跳路由指向缓存服务器，缓存服务器分析用户的上行请求，如果上行请求的资源已被缓存，则将资源发送给用户，否则将此上行请求代理到源站服务器。
5)DNS直路，用户通过本地(Local)DNS解析域名时，LocalDNS返回缓存服务器IP，此时用户向缓存服务器发起资源下载请求，缓存服务器分析此下载请求，如果资源已被缓存，则将资源发送给用户，否则将此下载请求代理到源站服务器。
6)本省IDC，本省内容源。
如图1所示，为适用于本申请实施例的一种网络结构示意图。图1中，业务交换机可以通过分光镜像把业务交换机的上下行链路镜像到报文提取服务器的网口上，报文提取服务器通过抓取网口上的镜像上下行链路，解析出镜像上下行链路中用户向待分析域名的服务器发送的请求报文中的请求端口字段、请求头等字段内容，同时还解析出待分析域名的服务器返回的响应报文中响应端口字段、响应状态码字段、缓存控制(cache control)字段、资源字段等字段内容，从而生成解析数据。
报文提取服务器将解析数据存放到与运营工具服务器约定好的目录下面，该目录位于报文提取服务器中。运营工具服务器定时通过安全文件传送协议(Secure FileTransfer Protocol，SFTP)连接到报文提取服务器，并在所述约定好的目录中下载解析数据，并定时对解析数据进行解析入库的同时对原始数据以域名加端口的维度对数据进行规并入库。在做可缓存分析时通过设置的权重信息结合入库的链路信息给出可缓存性分析结果。
基于上述描述，如图2所示，为本申请实施例提供的一种资源缓存方法流程示意图。图2所示的流程中，网络设备可以为运营工具服务器等设备。
参见图2，该方法包括：
步骤201：网络设备获取目标域名的解析数据，所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性。
其中，所述解析数据中可以包括以下一项或多项：向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制CacheControl字段为预设属性的报文的数量。
需要说明的是，目标域名可以是指任意一个域名，在这里不代表某一个特定的域名。目标服务器是指与目标域名绑定的服务器，通过目标域名可以访问目标服务器，从而获取或修改目标服务器中的内容。
步骤202：所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值。
步骤203：所述网络设备若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
步骤201中，请求报文可以是指任意一个或多个客户端向目标服务器发送的请求报文，本申请实施例对此并不限定。
本申请实施例中，请求报文可以是指HTTP请求报文。相应的，响应报文可以是指HTTP响应报文。上述请求报文以及响应报文的格式，可以参考HTTP协议中有关的描述，在此不再赘述。
网络设备可以周期性的通过SFTP连接到存储所述解析数据的报文提取服务器中下载解析数据。当然，网络设备也可以通过其他方式获取解析数据，本申请实施例对此并不限定。
需要说明的是，所述解析数据可以为报文提取服务器对发送给目标服务器的请求报文以及所述目标服务器返回的响应报文按照不同字段进行整理、统计等处理后获得的。例如，报文提取服务器可以提取发送给目标服务器的请求报文中请求端口字段、请求头字段等字段的内容；报文提取服务器可以提取目标服务器返回的响应报文中响应端口字段、响应状态码字段、CacheControl字段、资源字段等字段的内容。
步骤202中，所述网络设备确定综合权重值之前，可以先判断向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例是否小于或等于第二预设阈值，如果小于或等于第二预设阈值，则执行步骤202，否则可以直接确定不缓存所述目标服务器中的资源。
本申请实施例中，所述网络设备根据所述解析数据可以确定以下一项或多项权重值：
第一权重值，所述第一权重值等于：向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积。其中，预设端口可以根据实际情况设置，预设端口的数量不限定，
第二权重值，所述第二权重值等于：向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积。
需要说明的是，HTTP协议的请求报文的类型有get、post、head、put、delete、options、trace、connect等，本申请实施例中，在确定第二权重值时，可以是将get请求报文的数量与上述所有类型(即get、post、head、put、delete、options、trace、connect)的请求报文的数量的比值乘以第二预设值。
第三权重值，所述第三权重值等于：所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积。
其中，所述预设类型的资源包括以下一种或多种类型：
视频类型的资源；图片类型的资源；网页类型的资源；下载类型的资源。
第四权重值，所述第四权重值等于：所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积。
目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例等于：包括2字头的HTTP状态码的响应报文的数量/(包括1字头的HTTP状态码的响应报文的数量+包括2字头的HTTP状态码的响应报文的数量+包括3字头的HTTP状态码的响应报文的数量+包括4字头的HTTP状态码的响应报文的数量+包括5字头的HTTP状态码的响应报文的数量)。
需要说明的是，HTTP状态代码由三位数字组成，HTTP状态代码的第一个数字定义了响应的类别，且有1、2、3、4、5五种可能取值。具体的，1字头的HTTP状态码，即1xx：指示信息--表示请求已接收，继续处理。2字头的HTTP状态码，即2xx：成功--表示请求已被成功接收、理解、接受。3字头的HTTP状态码，即3xx：重定向--要完成请求必须进行更进一步的操作。4字头的HTTP状态码，即4xx：客户端错误--请求有语法错误或请求无法实现。5字头的HTTP状态码，即5xx：服务器端错误--服务器未能实现合法的请求。
常见状态代码、状态描述的说明如下：
200OK：客户端请求成功。
404Not Found：请求资源不存在。
500Internal Server Error：服务器发生不可预期的错误。
第五权重值，所述第五权重值等于：所述目标服务器返回的响应报文中CacheControl字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积。
其中，所述预设属性包括以下一种或多种属性：
max-age；public；s-max-age。
响应报文的Cache Control字段可以为以下属性：public、private、no-cache、no-store、no-transform、must-revalidate、proxy-revalidate、max-age等。各个属性含义如下：
Public指示响应可被任何缓存区缓存。
Private指示对于单个用户的整个或部分响应报文，不能被共享缓存处理。这允许服务器仅仅描述当用户的部分响应报文，此响应报文对于其他用户的请求无效。
no-cache指示请求或响应报文不能缓存
no-store用于防止重要的信息被无意的发布。在请求消息中发送将使得请求和响应报文都不使用缓存。
max-age指示客户端可以接收生存期不大于max-age指定时间(以秒为单位)的响应。
s-maxage，类似于max-age,但是它只用于公享缓存。
min-fresh指示客户端可以接收响应时间小于当前时间加上指定时间的响应。
max-stale指示客户端可以接收超出超时期间的响应报文。如果指定max-stale消息的值，那么客户端可以接收超出超时期指定值之内的响应报文。
最后，所述网络设备将确定出的一项或多项权重值的累加和作为所述综合权重值，即将第一权重值至第五权重值中的一项或多项进行累计，获得综合权重值。
需要说明的是，第一预设值至第五预设值均为大于或等于0的数。
最后在步骤203中，网络设备若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源，所述网络设备若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
下面通过具体的实施例详细描述前面的过程。
如图3所示，为本申请实施例提供一种资源缓存方法流程示意图。
步骤301：网络设备获取目标域名的解析数据。
步骤302：网络设备对目标域名的目标服务器的443端口进行拨测，判断443端口是否可用，若443端口可用，则转至步骤303，否则转至步骤307。
步骤303：判断向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例是否小于或等于第二预设阈值，若是，则转至步骤304，否则转至步骤307。
步骤304：网络设备根据所述解析数据确定第一权重值至第五权重值中的一项或多项权重值，并将确定出的一项或多项权重值的累加和作为综合权重值。
步骤305：网络设备判断所述综合权重值是否大于或等于第一预设阈值，若是，则转至步骤306，否则转至步骤307。
步骤306：网络设备缓存所述目标服务器中的资源，转至步骤308。
步骤307：网络设备不缓存所述目标服务器中的资源，转至步骤308。
步骤308：结束。
基于相同的技术构思，本申请实施例还提供一种资源缓存装置，该装置可执行上述方法实施例。
如图4所示，为本申请实施例提供一种资源缓存装置结构示意图。
参见图4，该装置包括：
收发单元401，用于获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
处理单元402，用于根据所述解析数据确定所述目标域名对应的综合权重值；若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
可选的，所述处理单元402还用于：
若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
可选的，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
可选的，所述处理单元402具体用于：
根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
将确定出的一项或多项权重值的累加和作为所述综合权重值。
可选的，所述处理单元402还用于：
确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
基于相同的技术构思，本申请实施例还提供一种资源缓存装置，该装置可执行上述方法实施例。
如图5所示，为本申请实施例提供一种资源缓存装置结构示意图。
参见图5，该装置包括：
收发器501，用于获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
处理器502，用于根据所述解析数据确定所述目标域名对应的综合权重值；若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
可选的，所述处理器502还用于：
若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
可选的，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
可选的，所述处理器502具体用于：
根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
将确定出的一项或多项权重值的累加和作为所述综合权重值。
可选的，所述处理器502还用于：
确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
本申请实施例中，收发器可以是有线收发器，无线收发器或其组合。有线收发器例如可以为以太网接口。以太网接口可以是光接口，电接口或其组合。无线收发器例如可以为无线局域网收发器，蜂窝网络收发器或其组合。处理器可以是中央处理器(英文：centralprocessing unit，缩写：CPU)，网络处理器(英文：network processor，缩写：NP)或者CPU和NP的组合。处理器还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(英文：application-specific integrated circuit，缩写：ASIC)，可编程逻辑器件(英文：programmable logic device，缩写：PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(英文：complex programmable logic device，缩写：CPLD)，现场可编程逻辑门阵列(英文：field-programmable gate array，缩写：FPGA)，通用阵列逻辑(英文：generic arraylogic,缩写：GAL)或其任意组合。
其中，图5中还可以包括总线接口，总线接口可以包括任意数量的互联的总线和桥，具体由处理器代表的一个或多个处理器和存储器代表的存储器的各种电路链接在一起。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的范围。这样，倘若本申请的这些修改和变型属于本申请权利要求的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种资源缓存方法，其特征在于，包括：
网络设备获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值；
所述网络设备若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述网络设备若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
3.根据权利要求1或2所述的方法，其特征在于，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量；
所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值，包括：
所述网络设备根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
所述网络设备将确定出的一项或多项权重值的累加和作为所述综合权重值。
4.根据权利要求3所述的方法，其特征在于，所述预设类型的资源包括以下一种或多种类型：
视频类型的资源；图片类型的资源；网页类型的资源；下载类型的资源。
5.根据权利要求1至4任一所述的方法，其特征在于，所述网络设备根据所述解析数据确定所述目标域名对应的综合权重值之前，还包括：
所述网络设备确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
6.一种资源缓存装置，其特征在于，包括：
收发单元，用于获取目标域名的解析数据；所述解析数据指示出所述目标域名对应的目标服务器的上下行链路中报文的缓存属性；
处理单元，用于根据所述解析数据确定所述目标域名对应的综合权重值；若确定所述综合权重值大于或等于第一预设阈值，则缓存所述目标服务器中的资源。
7.根据权利要求6所述的装置，其特征在于，所述处理单元还用于：
若确定所述综合权重值小于所述第一预设阈值，则不缓存所述目标服务器中的资源。
8.根据权利要求6或7所述的装置，其特征在于，所述解析数据中包括以下一项或多项：
向所述目标域名对应的目标服务器发送的包括预设端口的请求报文的数量；向所述目标服务器发送的获取get请求报文的数量；所述目标服务器中预设类型的资源的数量；所述目标服务器返回的包括2字头的超文本传输协议HTTP状态码的响应报文的数量；所述目标服务器返回的响应报文中缓存控制Cache Control字段为预设属性的报文的数量。
所述处理单元具体用于：
根据所述解析数据确定以下一项或多项权重值：
第一权重值，为向所述目标服务器发送的包括预设端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第一预设值的乘积；
第二权重值，为向所述目标服务器发送的get请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例与第二预设值的乘积；
第三权重值，为所述目标服务器中预设类型的资源的数量占所述目标服务器中总资源数量的比例与第三预设值的乘积；
第四权重值，为所述目标服务器返回的包括2字头的HTTP状态码的响应报文的数量占所述目标服务器返回的包括HTTP状态码的响应报文的数量的比例与第四预设值的乘积；
第五权重值，为所述目标服务器返回的响应报文中Cache Control字段为预设属性的报文的数量占所述目标服务器返回的包括Cache Control字段的响应报文的数量的比例与第五预设值的乘积；
将确定出的一项或多项权重值的累加和作为所述综合权重值。
9.根据权利要求8所述的装置，其特征在于，所述预设类型的资源包括以下一种或多种类型：
视频类型的资源；图片类型的资源；网页类型的资源；下载类型的资源。
10.根据权利要求6至9任一所述的装置，其特征在于，所述处理单元还用于：
确定向所述目标服务器发送的包括443端口的请求报文的数量占向所述目标服务器发送的所有请求报文的数量的比例小于或等于第二预设阈值。
CN201611238373.8A 2016-12-28 2016-12-28 一种资源缓存方法及装置 Active CN108259528B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611238373.8A CN108259528B (zh) 2016-12-28 2016-12-28 一种资源缓存方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611238373.8A CN108259528B (zh) 2016-12-28 2016-12-28 一种资源缓存方法及装置

Publications (2)

Publication Number Publication Date
CN108259528A true CN108259528A (zh) 2018-07-06
CN108259528B CN108259528B (zh) 2021-01-12

Family

ID=62720399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611238373.8A Active CN108259528B (zh) 2016-12-28 2016-12-28 一种资源缓存方法及装置

Country Status (1)

Country Link
CN (1) CN108259528B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110795656A (zh) * 2019-11-01 2020-02-14 成都云智天下科技股份有限公司 一种基于分光技术的http缓存方法
CN112667736A (zh) * 2020-12-23 2021-04-16 山东鲁能软件技术有限公司 一种数字运营管理系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000076168A (ja) * 1998-08-28 2000-03-14 Nec Corp キャッシュ更新通知配信方法及びそのシステム
US20040267906A1 (en) * 2003-06-26 2004-12-30 International Business Machines Corporation Systems and methods for adjusting caching policies for web service requests
US20050108327A1 (en) * 2003-11-17 2005-05-19 International Business Machines Corporation Hit ratio estimation device, hit ratio estimation method, hit ration estimation program and recording medium
CN102301682A (zh) * 2011-04-29 2011-12-28 华为技术有限公司 网络缓存方法和系统及dns重定向子系统
CN103973834A (zh) * 2014-05-12 2014-08-06 重庆邮电大学 一种基于家庭网关的dns域名解析加速方法及装置
CN104079534A (zh) * 2013-03-27 2014-10-01 中国移动通信集团北京有限公司 一种http缓存实现方法和系统
US8966121B2 (en) * 2008-03-03 2015-02-24 Microsoft Corporation Client-side management of domain name information
CN104935683A (zh) * 2015-06-29 2015-09-23 北京经天科技有限公司 用于域名解析的缓存处理方法和装置
CN105760405A (zh) * 2014-12-19 2016-07-13 阿里巴巴集团控股有限公司 用于加载web页面的网络资源获取方法、缓存方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000076168A (ja) * 1998-08-28 2000-03-14 Nec Corp キャッシュ更新通知配信方法及びそのシステム
US20040267906A1 (en) * 2003-06-26 2004-12-30 International Business Machines Corporation Systems and methods for adjusting caching policies for web service requests
US20050108327A1 (en) * 2003-11-17 2005-05-19 International Business Machines Corporation Hit ratio estimation device, hit ratio estimation method, hit ration estimation program and recording medium
US8966121B2 (en) * 2008-03-03 2015-02-24 Microsoft Corporation Client-side management of domain name information
CN102301682A (zh) * 2011-04-29 2011-12-28 华为技术有限公司 网络缓存方法和系统及dns重定向子系统
CN104079534A (zh) * 2013-03-27 2014-10-01 中国移动通信集团北京有限公司 一种http缓存实现方法和系统
CN103973834A (zh) * 2014-05-12 2014-08-06 重庆邮电大学 一种基于家庭网关的dns域名解析加速方法及装置
CN105760405A (zh) * 2014-12-19 2016-07-13 阿里巴巴集团控股有限公司 用于加载web页面的网络资源获取方法、缓存方法及装置
CN104935683A (zh) * 2015-06-29 2015-09-23 北京经天科技有限公司 用于域名解析的缓存处理方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ZHANG LUWEI: "Cacheability study for web content delivery", 《HTTPS://SCHOLARBANK.NUS.EDU.SG/HANDLE/10635/14576》 *
石磊: "Web对象可缓存性评价模型研究", 《计算机工程与设计》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110795656A (zh) * 2019-11-01 2020-02-14 成都云智天下科技股份有限公司 一种基于分光技术的http缓存方法
CN112667736A (zh) * 2020-12-23 2021-04-16 山东鲁能软件技术有限公司 一种数字运营管理系统
CN112667736B (zh) * 2020-12-23 2023-05-23 山东鲁能软件技术有限公司 一种数字运营管理系统

Also Published As

Publication number Publication date
CN108259528B (zh) 2021-01-12

Similar Documents

Publication Publication Date Title
US7945673B2 (en) Reduced wireless internet connect time
US20150229669A1 (en) Method and device for detecting distributed denial of service attack
US9178845B2 (en) Method, client device, server system for parsing a data usage value
US9571556B2 (en) Browser kernel adaptation method and browser therefor
EP2627032B1 (en) Method, policy server and gateway for determining policies
US11218382B2 (en) Quality of service monitoring method, device, and system
CN113613283B (zh) 一种Wi-Fi热点的连接方法和终端
US20020156896A1 (en) System and method for providing a gateway between mobile two-way messaging devices and remote computer networks
EP2610767A1 (en) Web page download time analysis
CN111294798B (zh) 一种数据交互的方法、装置、终端设备和介质
US20140122567A1 (en) Preemptive framework for accessing short urls
CN107360247B (zh) 处理业务的方法和网络设备
CN103404182A (zh) 一种防止业务非法访问的方法和装置
CN108390955A (zh) 域名获取方法、网站访问方法及服务器
CN108418780A (zh) Ip地址的过滤方法及装置、系统、dns服务器
US11622140B2 (en) Selective streaming of video segments based on buffer data and download rate range
CN109982293A (zh) 流量产品推送方法、系统、电子设备及存储介质
WO2016086755A1 (zh) 一种报文处理的方法和透明代理服务器
CN108809769B (zh) 一种检测IPv6活跃度的方法和电子设备
CN112954089A (zh) 一种解析数据的方法、装置、设备以及存储介质
CN110149299A (zh) 一种视频优化方法、装置和系统、终端和网络设备
US20150067066A1 (en) Provisioning Communication Services using Proxy Server in a Cloud
CN108259528A (zh) 一种资源缓存方法及装置
CN108184008A (zh) 一种终端通信性能评估方法和装置
CN113645653A (zh) 网络仿真测试方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200205

Address after: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen

Applicant after: HUAWEI TECHNOLOGIES Co.,Ltd.

Address before: 210012 HUAWEI Nanjing base, 101 software Avenue, Yuhuatai District, Jiangsu, Nanjing

Applicant before: Huawei Technologies Co.,Ltd.

GR01 Patent grant
GR01 Patent grant