CN113301081A - 一种针对内容分发网路的数据处理方法、装置、电子设备 - Google Patents

一种针对内容分发网路的数据处理方法、装置、电子设备 Download PDF

Info

Publication number
CN113301081A
CN113301081A CN202010528590.0A CN202010528590A CN113301081A CN 113301081 A CN113301081 A CN 113301081A CN 202010528590 A CN202010528590 A CN 202010528590A CN 113301081 A CN113301081 A CN 113301081A
Authority
CN
China
Prior art keywords
access request
node server
target
data
request message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010528590.0A
Other languages
English (en)
Other versions
CN113301081B (zh
Inventor
曾福华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202010528590.0A priority Critical patent/CN113301081B/zh
Publication of CN113301081A publication Critical patent/CN113301081A/zh
Application granted granted Critical
Publication of CN113301081B publication Critical patent/CN113301081B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63Routing a service request depending on the request content or context
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/563Data redirection of data network streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供一种针对内容分发网路的数据处理方法,包括:获得客户端发送的针对目标数据的访问请求消息;判断目标节点服务器中是否存在目标数据;若所述目标节点服务器中不存在所述目标数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目;如果所述历史访问请求消息的数目未达到数目阈值时,则针对所述访问请求消息,确定所述访问请求消息被重定向至的指定节点服务器。本申请提供的针对内容分发网路的数据处理方法,能够在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高访问请求消息的命中率。

Description

一种针对内容分发网路的数据处理方法、装置、电子设备
技术领域
本申请涉及计算机技术领域,具体涉及一种针对内容分发网路的数据处理方法。本申请同时涉及一种针对内容分发网路的数据处理装置、电子设备以及存储介质。
背景技术
CDN(Content Delivery Network,内容分发网路)网络是一种为改善互联网的服务质量而提出的网络,它依靠部署在各地的CDN网络中的节点服务器以及安装在节点服务器上的CDN节点系统,通过安装在CDN服务器上的CDN中心管理系统中的负载均衡、内容分发、调度等功能模块,使客户端就近获取所需静态数据内容和流媒体数据内容等,从而降低了网络拥塞,提高了客户端访问响应速度和命中率。
对于CDN网络中的节点服务器而言,客户端针对节点服务器的数据访问请求命中节点服务器中存储的数据的命中率,不仅会影响整个CDN网络的运行成本和CDN网络的服务质量,也会影响节点服务器的运行成本,所以,如何的提高CDN网络中的节点服务器的命中率受到了广泛的关注。现有的提高CDN网络中的服务器的命中率的方法,一般需要统计数据内容的访问热度,并根据数据内容的访问热度来进行命中率优化,以提高CDN网络中的节点服务器的命中率,如:在获得数据内容的访问热度的基础上,采用扩大部分CDN节点存储空间大小、尽量收缩CDN网络的节点服务器的数量以及数据访问请求精准地分配到不同节点等方式来提高命中率。但是,上述命中率优化方法,在提高命中率的同时,往往降低CDN网络节点服务器覆盖率、影响首屏以及降低CDN网络抗突发能力等,从而降低了CDN网络服务质量,增加了CDN网络对硬件需求。
发明内容
本申请提供一种针对内容分发网路的数据处理方法、装置、电子设备以及存储介质,以确保不收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高访问请求消息的命中率。
本申请提供一种针对内容分发网路的数据处理方法,包括:
获得客户端发送的针对目标数据的访问请求消息;
判断目标节点服务器中是否存在目标数据;
若所述目标节点服务器中不存在所述目标数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目;
如果所述历史访问请求消息的数目未达到数目阈值时,则针对所述访问请求消息,确定所述访问请求消息被重定向至的指定节点服务器。
可选的,所述针对所述访问请求消息,确定所述访问请求消息被重定向至的指定节点服务器,包括:
向所述目标节点服务器对应的管理服务器发送所述访问请求消息;
获得所述管理服务器针对所述访问请求消息提供的所述访问请求消息被重定向至指定节点服务器的消息;
根据所述访问请求消息被重定向至指定节点服务器的消息,确定所述访问请求消息被重定向至的指定节点服务器。
可选的,还包括:
生成针对所述指定节点服务器的反馈消息;
针对所述访问请求消息,将所述反馈消息提供给所述客户端。
可选的,还包括:如果所述历史访问请求消息的数目达到数目阈值时,则获得所述目标数据,并将所述目标数据存储到所述目标节点服务器。
可选的,还包括:
若所述目标节点服务器中存在所述目标数据,则在所述目标节点服务器中获得所述目标数据。
可选的,所述判断目标节点服务器中是否存在目标数据,包括:
判断所述访问请求消息是否命中所述目标节点服务器中存储的数据;
如果所述访问请求消息未命中所述目标节点服务器中存储的数据,则确定所述目标节点服务器中不存在所述目标数据。
可选的,所述判断目标节点服务器中是否存在目标数据,还包括:
如果所述访问请求消息命中所述目标节点服务器中存储的数据,则判断所述访问请求消息命中的数据是否为所述目标数据对应的元信息文件数据;
如果所述访问请求消息命中的数据不为所述目标数据对应的元信息文件数据,则确定所述目标节点服务器中存在所述目标数据。
可选的,所述判断目标节点服务器中是否存在目标数据,还包括:如果所述访问请求消息命中的数据为所述目标数据对应的元信息文件数据,则确定所述目标节点服务器中不存在所述目标数据。
可选的,所述若所述目标节点服务器中不存在所述目标数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目,包括:
若所述目标节点服务器中不存在所述目标数据,则获得所述目标数据对应的元信息文件数据;
通过所述目标数据对应的元信息文件数据,确定所述历史访问请求消息的数目。
可选的,所述如果所述历史访问请求消息的数目达到数目阈值时,则获得所述目标数据,并将所述目标数据存储到所述目标节点服务器,包括:
如果所述历史访问请求消息的数目达到数目阈值,则向所述目标节点服务器对应的根服务器发送所述访问请求消息;
获得所述目标节点服务器对应的根服务器针对所述访问请求消息、向所述目标节点服务器提供的所述目标数据对应的源站服务器信息;
根据所述目标数据对应的源站服务器信息,从所述目标数据对应的源站服务器获得所述目标数据,并将所述目标数据存储到所述目标节点服务器。
本申请另一方面,还提供一种针对内容分发网路的数据处理装置,包括:
访问请求消息获得单元,用于获得客户端发送的针对目标数据的访问请求消息;
目标数据判断单元,用于判断目标节点服务器中是否存在目标数据;
访问请求消息数目获得单元,用于若所述目标数据判断单元判断结果为否时,获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目;
目标数据存储单元,用于如果所述历史访问请求消息的数目未达到数目阈值时,针对所述访问请求消息确定所述访问请求消息被重定向至的指定节点服务器。
本申请另一方面,还提供一种针对内容分发网路的数据处理方法,包括:
获得目标节点服务器在预设条件下发送的访问请求消息,所述访问请求消息为针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
针对所述访问请求消息,确定所述访问请求消息被重定向至指定节点服务器的消息,并将所述访问请求消息被重定向至指定节点服务器的消息提供给所述目标节点服务器,所述访问请求消息被重定向至指定节点服务器的消息为用于确定所述访问请求消息被重定向至的指定节点服务器的消息。
可选的,还包括:将所述访问请求消息被重定向至指定节点服务器的消息提供给所述指定节点服务器。
可选的,所述确定所述访问请求消息被重定向至指定节点服务器的消息,包括:
针对所述访问请求消息,获得预设请求调度策略,所述预设请求调度策略为用于将所述访问请求消息重定向至可用节点服务器的策略;
根据所述预设请求调度策略,确定所述访问请求消息被重定向至的指定节点服务器,并生成所述访问请求消息被重定向至指定节点服务器的消息。
可选的,所述预设请求调度策略为一致性哈希调度策略。
本申请另一方面,还提供一种针对内容分发网路的数据处理装置,包括:
访问请求消息获得单元,用于获得目标节点服务器在预设条件下发送的访问请求消息,所述访问请求消息为针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
请求消息重定向单元,用于针对所述访问请求消息,确定所述访问请求消息被重定向至指定节点服务器的消息,并将所述访问请求消息被重定向至指定节点服务器的消息提供给所述目标节点服务器,所述访问请求消息被重定向至指定节点服务器的消息为用于确定所述访问请求消息被重定向至的指定节点服务器的消息。
本申请另一方面,还提供一种针对内容分发网路的数据处理方法,包括:
获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,所述访问请求消息被重定向至指定节点服务器的消息为所述管理服务器针对所述目标节点服务器在预设条件下向所述管理服务器发送的访问请求消息、生成的消息,用于确定所述访问请求消息被重定向至的指定节点服务器,所述访问请求消息为所述目标节点服务器对应的客户端向所述目标节点服务器发送的针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
获得所述客户端发送的所述访问请求消息;
根据所述访问请求消息被重定向至指定节点服务器的消息,针对所述访问请求消息,获得所述目标数据。
可选的,还包括:针对所述访问请求消息,将所述目标数据提供给所述客户端。
本申请另一方面,还提供一种针对内容分发网路的数据处理装置,包括:
重定向消息获得单元,用于获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,所述访问请求消息被重定向至指定节点服务器的消息为所述管理服务器针对所述目标节点服务器在预设条件下向所述管理服务器发送的访问请求消息、生成的消息,用于确定所述访问请求消息被重定向至的指定节点服务器,所述访问请求消息为所述目标节点服务器对应的客户端向所述目标节点服务器发送的针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
访问请求消息获得单元,用于获得所述客户端发送的所述访问请求消息;
目标数据获得单元,用于根据所述访问请求消息被重定向至指定节点服务器的消息,针对所述访问请求消息,获得所述目标数据。
本申请另一方面,还提供一种针对内容分发网路的数据处理方法,包括:
向目标节点服务器发送针对目标数据的数据访问请求;
获得所述目标节点服务器针对所述数据访问请求提供的反馈消息,所述反馈消息为所述标节点服务器针对所述访问请求消息被重定向至的指定节点服务器生成的消息;
根据所述反馈请求消息,向所述指定节点服务器发送所述数据访问请求;
获得所述指定节点服务器针对所述数据访问请求提供的目标数据。
本申请另一方面,还提供一种针对内容分发网路的数据处理装置,包括:
第一访问请求发送单元,用于向目标节点服务器发送针对目标数据的数据访问请求;
反馈消息获得单元,用于获得所述目标节点服务器针对所述数据访问请求提供的反馈消息,所述反馈消息为所述标节点服务器针对所述访问请求消息被重定向至的指定节点服务器生成的消息;
第一访问请求发送单元,用于根据所述反馈请求消息,向所述指定节点服务器发送所述数据访问请求;
目标数据获得单元,用于获得所述指定节点服务器针对所述数据访问请求提供的目标数据。
本申请另一方面,还提供一种电子设备,包括:
处理器;以及
存储器,用于存储计算机程序,该设备通电并通过所述处理器运行该计算机程序后,执行本申请提供的所述针对内容分发网路的数据处理方法。
本申请另一方面,还提供一种存储介质,该存储介质存储有计算机程序,该计算机程序被处理器运行,执行权利要求本申请提供的所述针对内容分发网路的数据处理方法。
本申请另一方面,还提供一种针对内容分发网路的图像下载方法,包括:
获得客户端发送的针对目标图像数据的下载请求消息;
判断目标节点服务器中是否存在目标图像数据;
若所述目标节点服务器中不存在所述目标图像数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标图像数据的历史下载请求消息的数目;
如果所述历史下载请求消息的数目未达到数目阈值时,则针对所述下载请求消息,确定所述下载请求消息被重定向至的指定节点服务器。
本申请另一方面,还提供一种针对内容分发网路的视频点播方法,包括:
获得客户端发送的针对目标视频数据的点播请求消息;
判断目标节点服务器中是否存在目标视频数据;
若所述目标节点服务器中不存在所述目标视频数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标视频数据的历史点播请求消息的数目;
如果所述历史点播请求消息的数目未达到数目阈值时,则针对所述点播请求消息,确定所述点播请求消息被重定向至的指定节点服务器。
与现有技术相比,本申请具有以下优点:
本申请提供的针对内容分发网路的数据处理方法,在获得客户端发送的针对目标静态数据的访问请求消息后,会先判断目标节点服务器中是否存在目标静态数据,并在目标节点服务器中不存在目标静态数据时,进一步获得目标节点服务器在指定时间区间内获得的访问请求消息的数目,再在访问请求消息的数目未达到数目阈值时,针对访问请求消息,确定访问请求消息被重定向至的指定节点服务器。本申请提供的针对内容分发网路的数据处理方法,在目标节点服务器中不存在目标数据,且目标节点服务器获得针对目标数据的历史访问请求消息的数目较少时,将访问请求消息重新定向至指定节点服务器,从而在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高了访问请求消息的命中率。
附图说明
图1为本申请提供的针对内容分发网路的数据处理方法的应用场景施例的示意图。
图2为本申请提供的一种访问请求消息被重定方法的流程图。
图3为本申请第一实施例中提供的一种针对内容分发网路的数据处理方法的流程图。
图4为本申请第一实施例中提供的目标静态数据获得方法的流程图。
图5为本申请第二实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
图6为本申请第三实施例中提供的一种针对内容分发网路的数据处理的流程图。
图7为本申请第四实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
图8为本申请第五实施例中提供的一种针对内容分发网路的数据处理的流程图。
图9为本申请第六实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
图10为本申请第七实施例中提供的一种针对内容分发网路的数据处理的流程图。
图11为本申请第八实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
图12为本申请实施例提供的一种电子设备的示意图。
图13为本申请第十一实施例中提供的一种针对内容分发网路的图像下载方法的流程图。
图14为本申请第十二实施例中提供的一种针对内容分发网路的视频点播方法。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似推广,因此本申请不受下面公开的具体实施的限制。
为了更清楚地展示本申请提供的针对内容分发网路的数据处理方法,先介绍一下本申请提供的针对内容分发网路的数据处理方法的应用场景。本申请提供的针对内容分发网路的数据处理方法,在实际应用中,一般用于对静态数据进行数据处理。所谓静态数据为已经存在且在指定时间段内不会发生变化的数据,如:已经存在的音频、视频、图像、网页等。其中,音频的具体实现方式为歌曲、录音等,视频的具体实现方式为影视作品、录像等。本申请提供的针对内容分发网路的数据处理方法具体可以应用于视频点播、图像下载、文件下载以及网页访问的加速等场景,本申请实施例中,具体以将针对内容分发网路的数据处理方法应用于图像下载加速的场景为例,对本申请提供的针对内容分发网路的数据处理方法进行详细的说明。
在实际应用中,本申请提供的针对内容分发网路的数据处理方法的执行一般需要基于内容分发网路。所谓内容分发网络包括:节点服务器和管理服务器。其中,节点服务器中可以具体划分为:目标节点服务器、指定节点服务器以及其它节点服务器。节点为安装有用于数据访问的程序或软件的计算机终端提供数据资源、以及存储客户端数据资源的服务器,在具体实现方式上可以为单个服务器,也可以为服务器集群。所谓安装有用于数据访问的程序或软件的服务器,如:安装有APP(Application,应用程序)的智能移动终端、安装有浏览器的。以将针对内容分发网路的数据处理方法应用于图像下载加速的场景为例,目标节点服务器、指定节点服务器以及其它节点服务器的区别为目标节点是直接接收客户端发送的图像下载请求的节点服务器,指定节点服务器为在满足一定预设条件时将管理节点服务器将图像下载请求消息重定向至的节点服务器,其它节点服务器为节点服务器中除目标节点服务器和指定节点服务器之外的节点服务器。所谓管理服务器为针对图像下载请求消息进行管理、以确定图像请求消息如何获取其针对的静态资源的服务器。在将本申请提供的针对内容分发网路的数据处理方法应用于图像下载加速的场景时,会涉及到客户端与目标节点服务器的交互。本申请提供的针对内容分发网路的数据处理方法的应用场景实施例中,具体以客户端为安装有支持图像浏览、下载的浏览器的电脑、目标节点服务器为与客户端对应的本地DNS(Domain Name System、域名系统)服务器将访问请求消息第一次定位到的节点服务器以及目标数据为目标静态数据,具体为目标图像数据,来对本申请提供的针对内容分发网路的数据处理方法进行详细的说明,此时,执行主体为部署在目标节点服务器上的用于执行针对内容分发网路的数据处理的节点软件系统。具体请参照图1,其为本申请提供的针对内容分发网路的数据处理方法的应用场景施例的示意图。所谓本地DNS服务器访问请求消息第一次定位到的节点服务器在具体实现上为源站服务器。
客户端101向本地DNS服务器102发送针对目标图像数据的访问请求消息,本地DNS服务器102在接收到客户端101发送的携带有域名信息的访问请求消息,并针对该访问请求消息向客户端101返回访问目标图像数据的第一源站服务器103对应的URL(UniformResource Locator,统一资源定位符)信息。具体的,本地DNS服务器102在接收到客户端101发送的携带有域名信息的访问请求消息后,会对该域名信息进行DNS(Domain NameSystem,域名系统)解析、建立TCP(Transmission Control Protocol,传输控制协议)握手、HTTP(Hyper Text Transfer Protocol,超文本传输协议)握手等操作,以获得访问目标图像数据的第一源站服务器对应的URL信息,即,获得目标节点服务器103对应的URL信息,并反馈给客户端101。
客户端101在获得目标节点服务器103对应的URL信息后,会再次向目标节点服务器103发出针对目标图像数据的访问请求消息。在目标节点服务器103在获得访问请求消息后,目标节点服务器103上的用于执行针对内容分发网路的数据处理的节点软件系统会先判断目标节点服务器103中是否存在目标图像数据,并且根据目标节点服务器103中是否存在目标图像数据执行以下三种不同的操作:
第一种操作为:若目标节点服务器103中存在目标图像数据,则先获得目标图像数据,再通过目标节点服务器103,将目标图像数据提供给客户端101。
第二种操作为:若目标节点服务器103中不存在目标图像数据,进一步获得目标节点服务器103在指定时间区间内获得针对目标图像数据的历史访问请求消息的数目,并在历史访问请求消息的数目达到数目阈值时,先获得目标图像数据,将目标图像数据存储到目标节点服务器103,再通过目标节点服务器103,将目标图像数据提供给客户端101。
在目标节点服务器103中不存在目标图像数据,且历史访问请求消息的数目达到数目阈值时,目标节点服务器103会向该目标节点服务器103对应的根服务器发送获取目标图像数据的数据访问请求消息。根服务器在获得数据访问请求消息后,会针对访问请求消息、向目标节点服务器提供的目标数据对应的源站服务器信息,即,目标图像数据所在的第二源站服务器对应的URL信息,并反馈给目标节点服务器103。目标节点服务器103会根据第二源站服务器对应的URL信息,向第二源站服务器104再次发送数据访问请求消息,并获得目标图像数据,然后,将目标图像数据存储到目标节点服务器103,再通过目标节点服务器103,将目标图像数据提供给客户端101。第三种操作为:若目标节点服务器103中不存在目标图像数据,进一步获得目标节点服务器103在指定时间区间内获得的访问请求消息的数目,并在访问请求消息的数目未达到数目阈值时,先获得访问请求消息被重定向至指定节点服务器,并生成针对指定节点服务器的反馈消息,再针对访问请求消息,将反馈消息提供给客户端101。客户端101在获得反馈消息后,会解析该反馈消息,获得指定节点服务器对应的URL信息,并根据指定节点服务器对应的URL信息,向指定节点服务器105发出针对目标图像数据的访问请求消息,并获得指定节点服务器105针对访问请求消息反馈的目标图像数据。
所谓获得指定节点服务器对应的URL信息的具体实现方式为:首先,向目标节点服务器对应的管理服务器106发送访问请求消息。然后,获得管理服务器106针对访问请求消息提供的访问请求消息被重定向至指定节点服务器的消息。最后,根据访问请求消息被重定向至指定节点服务器的消息,确定访问请求消息被重定向至的指定节点服务器105。
需要说明的是,在判断目标节点服务器103中是否存在目标图像数据时,需要先判断访问请求消息是否命中目标节点服务器103中存储的数据,如果访问请求消息未命中目标节点服务器103中存储的数据,则确定目标节点服务器103中不存在目标图像数据。如果访问请求消息命中目标节点服务器103中存储的数据,还需要进一步判断判断访问请求消息命中的数据是否仅为目标图像数据对应的元信息文件数据,访问请求消息命中的数据不为目标图像数据对应的元信息文件数据,否则,目标节点服务器103中不存在目标图像数据。所谓元信息文件数据为用于描述目标数据的信息的数据,具体为用于描述目标数据的结构、语义、用途和用法等信息的数据。
本申请提供的针对内容分发网路的数据处理方法的应用场景实施例中,在获得管理服务器106针对访问请求消息提供的访问请求消息被重定向至指定节点服务器的消息之前,管理服务器106需要在接收到目标节点服务器发送的访问请求消息后,先针对访问请求消息,获得预设请求调度策略,预设请求调度策略用于将访问请求消息重定向至可用节点服务器;再根据预设请求调度策略,确定访问请求消息被重定向至的指定节点服务器,并生成访问请求消息被重定向至指定节点服务器的消息。一般来说预设请求调度策略为一致性哈希调度策略。当说预设请求调度策略为一致性哈希调度策略时,将访问请求消息重定向至指定节点服务器的具体过程请参照图2,其为本申请提供的一种访问请求消息被重定方法的流程图。
步骤S201:获得访问请求消息。
步骤S202:针对访问请求消息,确定访问请求消息对应的哈希环区域,并获得内容分发网络中的节点服务器IP(Internet Protocol,网际互连协议)对应的哈希值。其中,所谓哈希即为hash(Hash House Harriers,散列函数)。
步骤S203:将内容分发网络中的节点服务器IP对应的哈希值,映射到访问请求消息对应的哈希环区域上,获得目标哈希环。
步骤S204:获得访问请求消息对应的哈希值,并将访问请求消息对应的哈希值与目标哈希环上的节点服务器IP对应的哈希值进行匹配,获得与访问请求消息对应的哈希值匹配的指定哈希值。
S205:根据指定哈希值,获得指定哈希值对应的IP,并根据指定哈希值对应的IP,获得指定节点服务器。
本申请的实施例中不对本申请提供的针对内容分发网路的数据处理方法的应用场景做具体的限定,如:本申请提供的针对内容分发网路的数据处理方法还可以应用于视频点播、网页浏览等应用场景。上述针对内容分发网路的数据处理方法的应用场景,仅仅是本申请提供的针对内容分发网路的数据处理方法的应用场景的一个实施例,提供该应用场景实施例的目的是便于理解本申请提供的针对内容分发网路的数据处理方法,而并非用于限定本申请提供的针对内容分发网路的数据处理方法。本申请实施例中对提供的针对内容分发网路的数据处理方法的其它应用场景,不再一一赘述。
第一实施例
本申请第一实施例提供一种针对内容分发网路的数据处理方法,以下结合图3-图4进行说明。
请参照图3,其为本申请第一实施例中提供的一种针对内容分发网路的数据处理方法的流程图。
在步骤S301中,获得客户端发送的针对目标数据的访问请求消息。
本申请第一实施例中,目标数据一般为静态数据,也可以为动态数据。所谓所谓静态数据为已经存在且在指定时间段内不会发生变化的数据,当目标数据为目标静态数据时,主要包括:图像数据、网页数据、视频数据、以及文件数据等。所谓动态数据为锁着时间变换而变化的数据,如:库存数据等。
在步骤S302中,判断目标节点服务器中是否存在目标数据。
本申请第一实施例中所谓目标节点服务器本地DNS服务器访问请求消息第一次定位到的节点服务器,在具体实现上为源站服务器。目标节点服务器为安装有用于数据访问的程序或软件的计算机终端提供数据资源、以及存储客户端数据资源的源站服务器,在具体实现方式上可以为单个服务器,也可以为服务器集群。
本申请第一实施例中,判断目标节点服务器中是否存在目标静态数据的步骤如下:判断访问请求消息是否命中目标节点服务器中存储的数据,并根据访问请求消息是否命中目标节点服务器中存储的数据,来执行以下两种不同的操作:
第一种操作为:如果访问请求消息未命中目标节点服务器中存储的数据,则确定目标节点服务器中不存在目标静态数据,此时,完成判断目标节点服务器中是否存在目标静态数据的过程。
第二种操作为:如果访问请求消息命中目标节点服务器中存储的数据,则进一步判断访问请求消息命中的数据是否为目标静态数据对应的元信息文件数据。如果访问请求消息命中的数据不为目标静态数据对应的元信息文件数据,则确定目标节点服务器中存在目标静态数据,并完成判断目标节点服务器中是否存在目标静态数据的过程。如果访问请求消息命中的数据为目标静态数据对应的元信息文件数据,则确定目标节点服务器中不存在目标静态数据,并完成判断目标节点服务器中是否存在目标静态数据的过程。
所谓元信息文件数据为用于描述目标数据的信息的数据,具体为用于描述目标数据的结构、语义、用途和用法等信息的数据。
需要说明的是,在本申请第一实施例中,若目标节点服务器中存在目标静态数据,则获得目标静态数据,并进一步通过目标节点服务器,将目标静态数据提供给客户端。
在步骤S303中,若目标节点服务器中不存在目标静态数据,则获得目标节点服务器在指定时间区间内获得的、针对目标数据的历史访问请求消息的数目。
本申请第一实施例中,在目标节点服务器中不存在目标静态数据时,获得目标节点服务器在指定时间区间内获得的访问请求消息的数目,包括:首先,若目标节点服务器中不存在目标静态数据,则获得目标静态数据对应的元信息文件数据。其次,通过目标静态数据对应的元信息文件数据,确定目标节点服务器在指定时间区间内获得的访问请求消息的数目。其中,本申请第一实施例中,目标静态数据对应的元信息文件数据一般为META(METAtag,元信息标签)标签。
在步骤S304中,如果访问请求消息的数目达到数目阈值时,则针对访问请求消息,确定访问请求消息被重定向至的指定节点服务器。
本申请第一实施例中,在访问请求消息的数目未达到数目阈值时,确定访问请求消息被重定向至的指定节点服务器的过程请参照图4,其为本申请第一实施例中提供的目标数据获得方法的流程图。
步骤S303-1:向目标节点服务器对应的管理服务器发送访问请求消息。步骤S303-1:获得管理服务器针对访问请求消息提供的访问请求消息被重定向至指定节点服务器的消息。步骤S303-3:根据访问请求消息被重定向至指定节点服务器的消息,确定访问请求消息被重定向至的指定节点服务器。
在确定访问请求消息被重定向至的指定节点服务器后,本申请第一实施例还需要进一步的生成针对指定节点服务器的反馈消息,并针对访问请求消息,将反馈消息提供给客户端。反馈消息提供给客户端能够便于客户端根据该反馈消息向指定节点服务器发送访问请求消息,从而获得指定服务器反馈的目标数据。即,客户端在获得反馈消息后,会解析该反馈消息,获得指定节点服务器对应的URL信息,并根据指定节点服务器对应的URL信息,向指定节点服务器发出针对目标数据的访问请求消息,并获得指定节点服务器针对访问请求消息反馈的目标数据。
本申请第一实施例中,在访问请求消息的数目达到数目阈值时,则获得目标数据,并将目标数据存储到目标节点服务器。具体的过程为:第一:如果历史访问请求消息的数目达到数目阈值,则向目标节点服务器对应的根服务器发送访问请求消息;第二:获得目标节点服务器对应的根服务器针对访问请求消息、向目标节点服务器提供的目标数据对应的源站服务器信息;第三:根据目标数据对应的源站服务器信息,从目标数据对应的源站服务器获得目标数据,并将目标数据存储到目标节点服务器。
所谓获得目标数据,并将目标数据存储到目标节点服务器的具体实现方式为:在目标节点服务器中不存在目标数据,且历史访问请求消息的数目达到数目阈值时,目标节点服务器会向该目标节点服务器对应的根服务器发送获取目标数据的数据访问请求消息。根服务器在获得数据访问请求消息后,会针对访问请求消息、向目标节点服务器提供的目标数据对应的源站服务器信息,即,目标数据所在的第二源站服务器对应的URL信息,并反馈给目标节点服务器。目标节点服务器会根据第二源站服务器对应的URL信息,向第二源站服务器再次发送数据访问请求消息,并获得目标数据,然后,将目标数据存储到目标节点服务器,再通过目标节点服务器,将目标数据提供给客户端。
本申请第一实施例中提供的针对内容分发网路的数据处理方法,在获得客户端发送的针对目标静态数据的访问请求消息后,会先判断目标节点服务器中是否存在目标静态数据,并在目标节点服务器中不存在目标静态数据时,进一步获得目标节点服务器在指定时间区间内获得的访问请求消息的数目,再在访问请求消息的数目未达到数目阈值时,针对访问请求消息,确定访问请求消息被重定向至的指定节点服务器。本申请第一实施例中提供的针对内容分发网路的数据处理方法,在目标节点服务器中不存在目标数据,且目标节点服务器获得针对目标数据的历史访问请求消息的数目较少时,将访问请求消息重新定向至指定节点服务器,从而在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高了访问请求消息的命中率。
第二实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第二实施例还提供了一种针对内容分发网路的数据处理装置。由于装置实施例基本相似于应用场景实施例以及第一实施例,所以描述得比较简单,相关之处参见应用场景实施例以及第一实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
请参照图5,其为本申请第二实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
该针对内容分发网路的数据处理装置,包括:
访问请求消息获得单元501,用于获得客户端发送的针对目标静态数据的访问请求消息;
目标静态数据判断单元502,用于判断目标节点服务器中是否存在目标静态数据;
访问请求消息数目获得单元503,用于若目标静态数据判断单元502判断结果为否时,获得目标节点服务器在指定时间区间内获得的、针对目标数据的历史访问请求消息的数目;
目标静态数据存储单元504,用于如果访问请求消息的数目未达到数目阈值时,针对访问请求消息,确定访问请求消息被重定向至的指定节点服务器。
可选的,访问请求消息数目获得单元503,具体用于向目标节点服务器对应的管理服务器发送访问请求消息;获得管理服务器针对访问请求消息提供的访问请求消息被重定向至指定节点服务器的消息;根据访问请求消息被重定向至指定节点服务器的消息,确定访问请求消息被重定向至的指定节点服务器。
可选的,本申请第二实施例中提供的针对内容分发网路的数据处理装置,还包括:
反馈消息生成单元,用于生成针对指定节点服务器的反馈消息;
反馈消息提供单元,用于针对访问请求消息,将反馈消息提供给客户端。
可选的,本申请第二实施例中提供的针对内容分发网路的数据处理装置,还包括:第一目标数据获得单元,用于在历史访问请求消息的数目达到数目阈值时,获得目标数据,并将目标数据存储到目标节点服务器。
可选的,本申请第二实施例中提供的针对内容分发网路的数据处理装置,还包括:
第二目标数据获得单元,用于在目标静态数据判断单元502的判断结果为是时,在目标节点服务器中获得目标数据。
目标数据提供单元,用于通过目标节点服务器,将目标数据提供给客户端。
可选的,目标静态数据判断单元502,具体用于判断访问请求消息是否命中目标节点服务器中存储的数据;如果访问请求消息未命中目标节点服务器中存储的数据,则确定目标节点服务器中不存在目标数据。
可选的,目标数据判断单元502,具体用于如果访问请求消息命中目标节点服务器中存储的数据,则判断访问请求消息命中的数据是否为目标数据对应的元信息文件数据;如果访问请求消息命中的数据不为目标数据对应的元信息文件数据,则确定目标节点服务器中存在目标数据。
可选的,目标数据判断单元502,具体用于如果访问请求消息命中的数据为目标数据对应的元信息文件数据,则确定目标节点服务器中不存在目标数据。
可选的,访问请求消息数目获得单元503,具体用于若目标节点服务器中不存在目标数据,则获得目标数据对应的元信息文件数据;通过目标数据对应的元信息文件数据,确定历史访问请求消息的数目。
可选的,如果历史访问请求消息的数目达到数目阈值时,则获得目标数据,并将目标数据存储到目标节点服务器,包括:
如果历史访问请求消息的数目达到数目阈值,则向目标节点服务器对应的根服务器发送访问请求消息;
获得目标节点服务器对应的根服务器针对访问请求消息、向目标节点服务器提供的目标数据对应的源站服务器信息;
根据目标数据对应的源站服务器信息,从目标数据对应的源站服务器获得目标数据,并将目标数据存储到目标节点服务器。
第三实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第三实施例提供另一种针对掩码预测模型的处理方法,对于本申请第三实施例提供的针对内容分发网路的数据处理方法的详细描述可以参考对本申请应用场景实施例以及第一实施例的相关描述,这里不再赘述。
本申请第三实施例提供一种针对内容分发网路的数据处理方法,以下结合图6进行说明。
请参照图6,其为本申请第三实施例中提供的一种针对内容分发网路的数据处理的流程图。
步骤S601:获得目标节点服务器在预设条件下发送的访问请求消息,访问请求消息为针对目标数据的请求消息,预设条件为目标节点服务器中不存在目标数据,并且在指定时间区间内获得的、针对目标数据的历史访问请求消息的数目未达到数目阈值。
本申请第三实施例中,所谓确定访问请求消息被重定向至指定节点服务器的消息的具体实现方式为:首先,针对访问请求消息,获得预设请求调度策略,预设请求调度策略为用于将访问请求消息重定向至可用节点服务器的策略。然后,根据预设请求调度策略,确定访问请求消息被重定向至的指定节点服务器,并生成访问请求消息被重定向至指定节点服务器的消息。其中,预设请求调度策略为一致性哈希调度策略。
步骤S602:针对访问请求消息,确定访问请求消息被重定向至指定节点服务器的消息,并将访问请求消息被重定向至指定节点服务器的消息提供给目标节点服务器,访问请求消息被重定向至指定节点服务器的消息为用于确定访问请求消息被重定向至的指定节点服务器的消息。本申请第三实施例中,还包括:将访问请求消息被重定向至指定节点服务器的消息提供给指定节点服务器。
本申请第三实施例中提供的针对内容分发网路的数据处理方法,在获得目标节点服务器在预设条件下发送的访问请求消息后,能够针对访问请求消息,确定访问请求消息被重定向至指定节点服务器的消息,并将访问请求消息被重定向至指定节点服务器的消息提供给目标节点服务器。本申请第三实施例中提供的针对内容分发网路的数据处理方法,在目标节点服务器中不存在目标数据,且目标节点服务器获得针对目标数据的历史访问请求消息的数目较少时,将访问请求消息重新定向至指定节点服务器,从而在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高了访问请求消息的命中率。
第四实施例
与本申请第三实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第四实施例还提供了一种针对内容分发网路的数据处理装置。由于装置实施例基本相似于应用场景实施例以及第三实施例,所以描述得比较简单,相关之处参见第三实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
请参照图7,其为本申请第四实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
该针对内容分发网路的数据处理装置,包括:
访问请求消息获得单元701,用于获得目标节点服务器在预设条件下发送的访问请求消息,所述访问请求消息为针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
请求消息重定向单元702,用于针对所述访问请求消息,确定所述访问请求消息被重定向至指定节点服务器的消息,并将所述访问请求消息被重定向至指定节点服务器的消息提供给所述目标节点服务器,所述访问请求消息被重定向至指定节点服务器的消息为用于确定所述访问请求消息被重定向至的指定节点服务器的消息。可选的,本申请第四实施例中提供的针对内容分发网路的数据处理装置,还包括:重定向消息提供单元,用于将所述访问请求消息被重定向至指定节点服务器的消息提供给所述指定节点服务器。
可选的,所述请求消息重定向单元702,具体用于针对所述访问请求消息,获得预设请求调度策略,所述预设请求调度策略为用于将所述访问请求消息重定向至可用节点服务器的策略;根据所述预设请求调度策略,确定所述访问请求消息被重定向至的指定节点服务器,并生成所述访问请求消息被重定向至指定节点服务器的消息。可选的,所述预设请求调度策略为一致性哈希调度策略。
第五实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第五实施例提供另一种针对内容分发网路的数据处理方法,对于本申请第五实施例提供的针对内容分发网路的数据处理方法的详细描述可以参考对本申请应用场景实施例以及第一实施例的相关描述,这里不再赘述。
本申请第五实施例提供一种针对内容分发网路的数据处理方法,以下结合图8进行说明。
请参照图8,其为本申请第五实施例中提供的一种针对内容分发网路的数据处理的流程图。
步骤S801:获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,访问请求消息被重定向至指定节点服务器的消息为管理服务器针对目标节点服务器在预设条件下向管理服务器发送的访问请求消息、生成的消息,用于确定访问请求消息被重定向至的指定节点服务器。
本申请第五实施例中,访问请求消息为目标节点服务器对应的客户端向目标节点服务器发送的针对目标数据的请求消息,预设条件为目标节点服务器中不存在目标数据,并且在指定时间区间内获得的、针对目标数据的历史访问请求消息的数目未达到数目阈值。
步骤S802:获得客户端发送的访问请求消息。
步骤S803:根据访问请求消息被重定向至指定节点服务器的消息,针对访问请求消息,获得目标数据。
本申请第五实施例中,在获得目标静态数据后,还需要针对访问请求消息,将目标静态数据提供给目标节点服务器。
本申请第五实施例提供的针对内容分发网路的数据处理方法,在获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息后,进一步根据访问请求消息被重定向至指定节点服务器的消息,针对访问请求消息,获得目标数据。本申请第五实施例提供的针对内容分发网路的数据处理方法,在目标节点服务器中不存在目标数据,且目标节点服务器获得针对目标数据的历史访问请求消息的数目较少时,将访问请求消息重新定向至指定节点服务器,并获得针对访问请求消息的目标数据,从而在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高了访问请求消息的命中率。
第六实施例
与本申请第五实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第六实施例还提供了一种针对内容分发网路的数据处理装置。由于装置实施例基本相似于应用场景实施例以及第五实施例,所以描述得比较简单,相关之处参见第五实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
请参照图9,其为本申请第六实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
该针对内容分发网路的数据处理装置,包括:
重定向消息获得单元901,用于获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,所述访问请求消息被重定向至指定节点服务器的消息为所述管理服务器针对所述目标节点服务器在预设条件下向所述管理服务器发送的访问请求消息、生成的消息,用于确定所述访问请求消息被重定向至的指定节点服务器,所述访问请求消息为所述目标节点服务器对应的客户端向所述目标节点服务器发送的针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
访问请求消息获得单元902,用于获得所述客户端发送的所述访问请求消息;
目标数据获得单元903,用于根据所述访问请求消息被重定向至指定节点服务器的消息,针对所述访问请求消息,获得所述目标数据。
可选的,本申请第六实施例中提供的针对内容分发网路的数据处理装置,还包括:目标静态数据提供单元,用于针对所述访问请求消息,将所述目标静态数据提供给所述客户端。
第七实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第七实施例提供另一种针对内容分发网路的数据处理方法,对于本申请第七实施例提供的针对内容分发网路的数据处理方法的详细描述可以参考对本申请应用场景实施例以及第一实施例的相关描述,这里不再赘述。
本申请第七实施例提供一种针对内容分发网路的数据处理方法,以下结合图8进行说明。
请参照图10,其为本申请第七实施例中提供的一种针对内容分发网路的数据处理的流程图。
步骤S1001:向目标节点服务器发送针对目标数据的数据访问请求。
步骤S1002:获得目标节点服务器针对数据访问请求提供的反馈消息,反馈消息为标节点服务器针对访问请求消息被重定向至的指定节点服务器生成的消息。
步骤S1003:根据反馈请求消息,向指定节点服务器发送数据访问请求。
步骤S1004:获得指定节点服务器针对数据访问请求提供的目标数据。
本申请第七实施例提供的针对内容分发网路的数据处理方法,在获得目标节点服务器针对数据访问请求提供的反馈消息,反馈消息为标节点服务器针对访问请求消息被重定向至的指定节点服务器生成的消息,会进一步根据反馈请求消息,向指定节点服务器发送数据访问请求,并获得指定节点服务器针对数据访问请求提供的目标数据。本申请第七实施例提供的针对内容分发网路的数据处理方法,能够获得目标节点服务器针对访问请求消息被重定向至的指定节点服务器生成的消息,并根据反馈请求消息,获得指定节点服务器针对数据访问请求提供的目标数据,从而在无需收缩内容分发网路的网络节点服务器的数量,提高节点服务器对存储设备等硬件需求的基础上,提高了访问请求消息的命中率。
第八实施例
与本申请第七实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第八实施例还提供了一种针对内容分发网路的数据处理装置。由于装置实施例基本相似于第七实施例,所以描述得比较简单,相关之处参见第七实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
请参照图11,其为本申请第八实施例中提供的一种针对内容分发网路的数据处理装置的示意图。
该针对内容分发网路的数据处理装置,包括:
第一访问请求发送单元1101,用于向目标节点服务器发送针对目标数据的数据访问请求;
反馈消息获得单元1102,用于获得所述目标节点服务器针对所述数据访问请求提供的反馈消息,所述反馈消息为所述标节点服务器针对所述访问请求消息被重定向至的指定节点服务器生成的消息;
第一访问请求发送单元1103,用于根据所述反馈请求消息,向所述指定节点服务器发送所述数据访问请求;
目标数据获得单元1104,用于获得所述指定节点服务器针对所述数据访问请求提供的目标数据。
第九实施例
与本申请上述实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第九实施例提供一种电子设备。
如图12所示,图12为本申请实施例提供的一种电子设备的示意图。所述电子设备包括:
处理器1201;以及
存储器1202,用于存储计算机程序,该设备通电并通过所述处理器运行该计算机程序后,用于执行上述实施例提供的针对内容分发网路的数据处理方法。
需要说明的是,对于本申请第九实施例提供的电子设备执行的针对内容分发网路的数据处理方法的详细描述,可以参考对本申请第上述实施例的相关描述,这里不再赘述。
第十实施例
与本申请上述实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第八实施例提供一种存储介质,该存储介质存储有计算机程序,该计算机程序被处理器运行,用于执行上述实施例提供的针对内容分发网路的数据处理方法。
需要说明的是,对于本申请第十实施例提供的存储介质执行的针对内容分发网路的数据处理方法的详细描述,可以参考对本申请第上述实施例的相关描述,这里不再赘述。
第十一实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第十一实施例提供一种针对内容分发网路的图像下载方法。对于本申请第十一实施例提供的针对内容分发网路的图像下载方法的详细描述可以参考对本申请应用场景实施例以及第一实施例的相关描述,这里不再赘述。
请参照图13,其为本申请第十一实施例中提供的一种针对内容分发网路的图像下载方法的流程图。
步骤S1301:获得客户端发送的针对目标图像数据的下载请求消息。
步骤S1302:判断目标节点服务器中是否存在目标图像数据。
步骤S1303:若目标节点服务器中不存在目标图像数据,则获得目标节点服务器在指定时间区间内获得的、针对目标图像数据的历史下载请求消息的数目。
步骤S1304:如果历史下载请求消息的数目未达到数目阈值时,则针对下载请求消息,确定下载请求消息被重定向至的指定节点服务器。
第十二实施例
与本申请应用场景实施例以及第一实施例提供的针对内容分发网路的数据处理方法相对应的,本申请第十二实施例提供一种针对内容分发网路的视频点播方法。对于本申请第十二实施例提供的针对内容分发网路的视频点播方法的详细描述可以参考对本申请应用场景实施例以及第一实施例的相关描述,这里不再赘述。
请参照图14,其为本申请第十二实施例中提供的一种针对内容分发网路的视频点播方法。
步骤S1401:获得客户端发送的针对目标视频数据的点播请求消息。
步骤S1401:判断目标节点服务器中是否存在目标视频数据。
步骤S1403:若目标节点服务器中不存在目标视频数据,则获得目标节点服务器在指定时间区间内获得的、针对目标视频数据的历史点播请求消息的数目。
步骤S1404:如果历史点播请求消息的数目未达到数目阈值时,则针对点播请求消息,确定点播请求消息被重定向至的指定节点服务器。
本申请虽然以较佳实施例公开如上,但其并不是用来限定本申请,任何本领域技术人员在不脱离本发明的精神和范围内,都可以做出可能的变动和修改,因此本申请的保护范围应当以本申请权利要求所界定的范围为准。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(Flash RAM)。内存是计算机可读介质的示例。
1、计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(Transitory Media),如调制的数据信号和载波。
2、本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

Claims (25)

1.一种针对内容分发网路的数据处理方法,其特征在于,包括:
获得客户端发送的针对目标数据的访问请求消息;
判断目标节点服务器中是否存在目标数据;
若所述目标节点服务器中不存在所述目标数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目;
如果所述历史访问请求消息的数目未达到数目阈值时,则针对所述访问请求消息,确定所述访问请求消息被重定向至的指定节点服务器。
2.根据权利要求1所述的针对内容分发网路的数据处理方法,其特征在于,所述针对所述访问请求消息,确定所述访问请求消息被重定向至的指定节点服务器,包括:
向所述目标节点服务器对应的管理服务器发送所述访问请求消息;
获得所述管理服务器针对所述访问请求消息提供的所述访问请求消息被重定向至指定节点服务器的消息;
根据所述访问请求消息被重定向至指定节点服务器的消息,确定所述访问请求消息被重定向至的指定节点服务器。
3.根据权利要求1或2所述的针对内容分发网路的数据处理方法,其特征在于,还包括:
生成针对所述指定节点服务器的反馈消息;
针对所述访问请求消息,将所述反馈消息提供给所述客户端。
4.根据权利要求1所述的针对内容分发网路的数据处理方法,其特征在于,还包括:如果所述历史访问请求消息的数目达到数目阈值时,则获得所述目标数据,并将所述目标数据存储到所述目标节点服务器。
5.根据权利要求1所述的针对内容分发网路的数据处理方法,其特征在于,还包括:
若所述目标节点服务器中存在所述目标数据,则在所述目标节点服务器中获得所述目标数据。
6.根据权利要求1所述的针对内容分发网路的数据处理方法,其特征在于,所述判断目标节点服务器中是否存在目标数据,包括:
判断所述访问请求消息是否命中所述目标节点服务器中存储的数据;
如果所述访问请求消息未命中所述目标节点服务器中存储的数据,则确定所述目标节点服务器中不存在所述目标数据。
7.根据权利要求6所述的针对内容分发网路的数据处理方法,其特征在于,所述判断目标节点服务器中是否存在目标数据,还包括:
如果所述访问请求消息命中所述目标节点服务器中存储的数据,则判断所述访问请求消息命中的数据是否为所述目标数据对应的元信息文件数据;
如果所述访问请求消息命中的数据不为所述目标数据对应的元信息文件数据,则确定所述目标节点服务器中存在所述目标数据。
8.根据权利要求7所述的针对内容分发网路的数据处理方法,其特征在于,所述判断目标节点服务器中是否存在目标数据,还包括:如果所述访问请求消息命中的数据为所述目标数据对应的元信息文件数据,则确定所述目标节点服务器中不存在所述目标数据。
9.根据权利要求1所述的针对内容分发网路的数据处理方法,其特征在于,所述若所述目标节点服务器中不存在所述目标数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目,包括:
若所述目标节点服务器中不存在所述目标数据,则获得所述目标数据对应的元信息文件数据;
通过所述目标数据对应的元信息文件数据,确定所述历史访问请求消息的数目。
10.根据权利要求4所述的针对内容分发网路的数据处理方法,其特征在于,所述如果所述历史访问请求消息的数目达到数目阈值时,则获得所述目标数据,并将所述目标数据存储到所述目标节点服务器,包括:
如果所述历史访问请求消息的数目达到数目阈值,则向所述目标节点服务器对应的根服务器发送所述访问请求消息;
获得所述目标节点服务器对应的根服务器针对所述访问请求消息、向所述目标节点服务器提供的所述目标数据对应的源站服务器信息;
根据所述目标数据对应的源站服务器信息,从所述目标数据对应的源站服务器获得所述目标数据,并将所述目标数据存储到所述目标节点服务器。
11.一种针对内容分发网路的数据处理装置,其特征在于,包括:
访问请求消息获得单元,用于获得客户端发送的针对目标数据的访问请求消息;
目标数据判断单元,用于判断目标节点服务器中是否存在目标数据;
访问请求消息数目获得单元,用于若所述目标数据判断单元判断结果为否时,获得所述目标节点服务器在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目;
目标数据存储单元,用于如果所述历史访问请求消息的数目未达到数目阈值时,针对所述访问请求消息确定所述访问请求消息被重定向至的指定节点服务器。
12.一种针对内容分发网路的数据处理方法,其特征在于,包括:
获得目标节点服务器在预设条件下发送的访问请求消息,所述访问请求消息为针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
针对所述访问请求消息,确定所述访问请求消息被重定向至指定节点服务器的消息,并将所述访问请求消息被重定向至指定节点服务器的消息提供给所述目标节点服务器,所述访问请求消息被重定向至指定节点服务器的消息为用于确定所述访问请求消息被重定向至的指定节点服务器的消息。
13.根据权利要求12所述的针对内容分发网路的数据处理方法,其特征在于,还包括:将所述访问请求消息被重定向至指定节点服务器的消息提供给所述指定节点服务器。
14.根据权利要求12所述的针对内容分发网路的数据处理方法,其特征在于,所述确定所述访问请求消息被重定向至指定节点服务器的消息,包括:
针对所述访问请求消息,获得预设请求调度策略,所述预设请求调度策略为用于将所述访问请求消息重定向至可用节点服务器的策略;
根据所述预设请求调度策略,确定所述访问请求消息被重定向至的指定节点服务器,并生成所述访问请求消息被重定向至指定节点服务器的消息。
15.根据权利要求14所述的针对内容分发网路的数据处理方法,其特征在于,所述预设请求调度策略为一致性哈希调度策略。
16.一种针对内容分发网路的数据处理装置,其特征在于,包括:
访问请求消息获得单元,用于获得目标节点服务器在预设条件下发送的访问请求消息,所述访问请求消息为针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
请求消息重定向单元,用于针对所述访问请求消息,确定所述访问请求消息被重定向至指定节点服务器的消息,并将所述访问请求消息被重定向至指定节点服务器的消息提供给所述目标节点服务器,所述访问请求消息被重定向至指定节点服务器的消息为用于确定所述访问请求消息被重定向至的指定节点服务器的消息。
17.一种针对内容分发网路的数据处理方法,其特征在于,包括:
获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,所述访问请求消息被重定向至指定节点服务器的消息为所述管理服务器针对所述目标节点服务器在预设条件下向所述管理服务器发送的访问请求消息、生成的消息,用于确定所述访问请求消息被重定向至的指定节点服务器,所述访问请求消息为所述目标节点服务器对应的客户端向所述目标节点服务器发送的针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
获得所述客户端发送的所述访问请求消息;
根据所述访问请求消息被重定向至指定节点服务器的消息,针对所述访问请求消息,获得所述目标数据。
18.根据权利要求17所述的针对内容分发网路的数据处理方法,其特征在于,还包括:针对所述访问请求消息,将所述目标数据提供给所述客户端。
19.一种针对内容分发网路的数据处理装置,其特征在于,包括:
重定向消息获得单元,用于获得管理服务器提供的访问请求消息被重定向至指定节点服务器的消息,所述访问请求消息被重定向至指定节点服务器的消息为所述管理服务器针对所述目标节点服务器在预设条件下向所述管理服务器发送的访问请求消息、生成的消息,用于确定所述访问请求消息被重定向至的指定节点服务器,所述访问请求消息为所述目标节点服务器对应的客户端向所述目标节点服务器发送的针对目标数据的请求消息,所述预设条件为所述目标节点服务器中不存在所述目标数据,并且在指定时间区间内获得的、针对所述目标数据的历史访问请求消息的数目未达到数目阈值;
访问请求消息获得单元,用于获得所述客户端发送的所述访问请求消息;
目标数据获得单元,用于根据所述访问请求消息被重定向至指定节点服务器的消息,针对所述访问请求消息,获得所述目标数据。
20.一种针对内容分发网路的数据处理方法,其特征在于,包括:
向目标节点服务器发送针对目标数据的数据访问请求;
获得所述目标节点服务器针对所述数据访问请求提供的反馈消息,所述反馈消息为所述标节点服务器针对所述访问请求消息被重定向至的指定节点服务器生成的消息;
根据所述反馈请求消息,向所述指定节点服务器发送所述数据访问请求;
获得所述指定节点服务器针对所述数据访问请求提供的目标数据。
21.一种针对内容分发网路的数据处理装置,其特征在于,包括:
第一访问请求发送单元,用于向目标节点服务器发送针对目标数据的数据访问请求;
反馈消息获得单元,用于获得所述目标节点服务器针对所述数据访问请求提供的反馈消息,所述反馈消息为所述标节点服务器针对所述访问请求消息被重定向至的指定节点服务器生成的消息;
第一访问请求发送单元,用于根据所述反馈请求消息,向所述指定节点服务器发送所述数据访问请求;
目标数据获得单元,用于获得所述指定节点服务器针对所述数据访问请求提供的目标数据。
22.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储计算机程序,该设备通电并通过所述处理器运行该计算机程序后,执行权利要求1-10、12-15、17-18以及20任意一项所述的针对内容分发网路的数据处理方法。
23.一种存储介质,其特征在于,该存储介质存储有计算机程序,该计算机程序被处理器运行,执行权利要求1-10、12-15、17-18以及20任意一项所述的针对内容分发网路的数据处理方法。
24.一种针对内容分发网路的图像下载方法,其特征在于,包括:
获得客户端发送的针对目标图像数据的下载请求消息;
判断目标节点服务器中是否存在目标图像数据;
若所述目标节点服务器中不存在所述目标图像数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标图像数据的历史下载请求消息的数目;
如果所述历史下载请求消息的数目未达到数目阈值时,则针对所述下载请求消息,确定所述下载请求消息被重定向至的指定节点服务器。
25.一种针对内容分发网路的视频点播方法,其特征在于,包括:
获得客户端发送的针对目标视频数据的点播请求消息;
判断目标节点服务器中是否存在目标视频数据;
若所述目标节点服务器中不存在所述目标视频数据,则获得所述目标节点服务器在指定时间区间内获得的、针对所述目标视频数据的历史点播请求消息的数目;
如果所述历史点播请求消息的数目未达到数目阈值时,则针对所述点播请求消息,确定所述点播请求消息被重定向至的指定节点服务器。
CN202010528590.0A 2020-06-11 2020-06-11 一种针对内容分发网路的数据处理方法、装置、电子设备 Active CN113301081B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010528590.0A CN113301081B (zh) 2020-06-11 2020-06-11 一种针对内容分发网路的数据处理方法、装置、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010528590.0A CN113301081B (zh) 2020-06-11 2020-06-11 一种针对内容分发网路的数据处理方法、装置、电子设备

Publications (2)

Publication Number Publication Date
CN113301081A true CN113301081A (zh) 2021-08-24
CN113301081B CN113301081B (zh) 2024-05-03

Family

ID=77318660

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010528590.0A Active CN113301081B (zh) 2020-06-11 2020-06-11 一种针对内容分发网路的数据处理方法、装置、电子设备

Country Status (1)

Country Link
CN (1) CN113301081B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114697683A (zh) * 2022-03-25 2022-07-01 腾讯音乐娱乐科技(深圳)有限公司 流媒体文件的智能调度方法、设备和计算机程序产品

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040139170A1 (en) * 2003-01-15 2004-07-15 Ming-Teh Shen Method and apparatus for management of shared wide area network connections
CN102137087A (zh) * 2010-09-15 2011-07-27 华为技术有限公司 业务处理方法、对已分发的内容进行调整的方法和业务节点
CN103179161A (zh) * 2011-12-23 2013-06-26 华为技术有限公司 一种内容获取方法、装置及网络系统
EP2615791A1 (en) * 2012-01-13 2013-07-17 Alcatel Lucent Method, system and devices for delivering media content in IP networks
US20150058403A1 (en) * 2013-08-20 2015-02-26 Alibaba Group Holding Limited Method and system of dispatching requests in a content delivery network
CN104714965A (zh) * 2013-12-16 2015-06-17 阿里巴巴集团控股有限公司 静态资源去重方法、静态资源管理方法及装置
CN105978936A (zh) * 2016-04-25 2016-09-28 乐视控股(北京)有限公司 Cdn服务器及其缓存数据的方法
US20180295640A1 (en) * 2015-03-17 2018-10-11 Wangsu Science & Technology Co., Ltd. Method, device, and system for content delivery network-based mobile terminal traffic processing
CN110324434A (zh) * 2018-03-28 2019-10-11 阿里巴巴集团控股有限公司 域名解析的方法、客户端、服务器和电子设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040139170A1 (en) * 2003-01-15 2004-07-15 Ming-Teh Shen Method and apparatus for management of shared wide area network connections
CN102137087A (zh) * 2010-09-15 2011-07-27 华为技术有限公司 业务处理方法、对已分发的内容进行调整的方法和业务节点
CN103179161A (zh) * 2011-12-23 2013-06-26 华为技术有限公司 一种内容获取方法、装置及网络系统
EP2615791A1 (en) * 2012-01-13 2013-07-17 Alcatel Lucent Method, system and devices for delivering media content in IP networks
US20150058403A1 (en) * 2013-08-20 2015-02-26 Alibaba Group Holding Limited Method and system of dispatching requests in a content delivery network
CN104714965A (zh) * 2013-12-16 2015-06-17 阿里巴巴集团控股有限公司 静态资源去重方法、静态资源管理方法及装置
US20180295640A1 (en) * 2015-03-17 2018-10-11 Wangsu Science & Technology Co., Ltd. Method, device, and system for content delivery network-based mobile terminal traffic processing
CN105978936A (zh) * 2016-04-25 2016-09-28 乐视控股(北京)有限公司 Cdn服务器及其缓存数据的方法
CN110324434A (zh) * 2018-03-28 2019-10-11 阿里巴巴集团控股有限公司 域名解析的方法、客户端、服务器和电子设备

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
李聪颖;王瑞刚;梁小江;: "CDN技术的研究与设计", 物联网技术, no. 12 *
蒋杰;: "CDN系统的关键技术", 数字通信世界, no. 08 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114697683A (zh) * 2022-03-25 2022-07-01 腾讯音乐娱乐科技(深圳)有限公司 流媒体文件的智能调度方法、设备和计算机程序产品

Also Published As

Publication number Publication date
CN113301081B (zh) 2024-05-03

Similar Documents

Publication Publication Date Title
US10382385B2 (en) Network address resolution
KR101330052B1 (ko) 적응형 컨텐츠 전송 방식을 지원하는 컨텐츠 캐싱 서비스 제공 방법 및 이를 위한 로컬 캐싱 장치
EP3979602A1 (en) Request-based encoding for streaming content portions
US9727579B2 (en) Systems and methods for storing digital content
CN102111685B (zh) 一种网络视频加载的加速方法、设备及系统
US11064043B2 (en) System and method for providing an adjunct device in a content distribution network
US11729249B2 (en) Network address resolution
JP5805934B2 (ja) Urlを利用した分散コントロール方法及び装置
CN107566477B (zh) 一种在分布式文件系统集群中获取文件的方法和装置
CN105100294A (zh) 获取网页的方法、系统、网络服务器、浏览器和gslb
US20170094009A1 (en) Content delivery network transitional caching
US8769277B2 (en) Content retrieval
CN113301081B (zh) 一种针对内容分发网路的数据处理方法、装置、电子设备
CN106919595B (zh) 一种用于Cookie映射的方法、装置及电子设备
WO2017210224A1 (en) System and method for providing reliable and efficient data transfer
CN106713479B (zh) 一种基于云端的文件去重方法
CN113285920B (zh) 业务访问方法、装置、设备及存储介质
KR20150011087A (ko) 컨텐츠 전송 서비스를 위한 분산 캐싱 관리 방법 및 이를 위한 중앙 관리 장치
CN110476401B (zh) 多媒体服务内容提供装置和方法
US10880396B2 (en) Pre-fetching random-value resource locators
US10389786B1 (en) Output tracking for protected content-stream portions
CN112883298B (zh) 一种信息处理方法、装置、电子设备以及存储介质
US20200128103A1 (en) Methods, network node and client device for acquisition and delivery of resources in a communications network
Byun et al. Effective Data Transfer Method Using Local Network in Building IoT Environments
US20230171441A1 (en) Method providing to a user terminal a target multimedia content available at a master server

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40059153

Country of ref document: HK

GR01 Patent grant