CN105450535A - 一种海量的cdn节点资源部署系统和方法 - Google Patents

一种海量的cdn节点资源部署系统和方法 Download PDF

Info

Publication number
CN105450535A
CN105450535A CN201510764284.6A CN201510764284A CN105450535A CN 105450535 A CN105450535 A CN 105450535A CN 201510764284 A CN201510764284 A CN 201510764284A CN 105450535 A CN105450535 A CN 105450535A
Authority
CN
China
Prior art keywords
resource
cdn node
network
user
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510764284.6A
Other languages
English (en)
Other versions
CN105450535B (zh
Inventor
张志伟
周义朋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
College Of Computer Science & Software Engineering Shenzhen University
Shenzhen Onething Technology Co Ltd
Original Assignee
College Of Computer Science & Software Engineering Shenzhen University
Shenzhen Onething Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by College Of Computer Science & Software Engineering Shenzhen University, Shenzhen Onething Technology Co Ltd filed Critical College Of Computer Science & Software Engineering Shenzhen University
Priority to CN201510764284.6A priority Critical patent/CN105450535B/zh
Publication of CN105450535A publication Critical patent/CN105450535A/zh
Application granted granted Critical
Publication of CN105450535B publication Critical patent/CN105450535B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/12Avoiding congestion; Recovering from congestion

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明提供一种海量的CDN节点资源部署系统和方法,该系统的控制单元用于控制CDN节点的开启与关闭,统计单元用于进行资源统计和用户分级统计以得到网络资源需求数据,部署单元用于根据网络资源需求数据制定网络资源分配方案,分发单元用于根据网络资源分配方案将网络资源分发给CDN节点,生成单元用于生成文件索引目录,索引单元根据用户的访问请求查找文件索引目录以获得若干对应的CDN节点,对应的CDN节点与用户连接以供给用户请求的网络资源数据。藉由这种系统和方法,用户可以通过就近的CDN节点来获取所需的网络资源,解决了目前网络拥挤的状况,从而提高网络访问速度。

Description

一种海量的CDN节点资源部署系统和方法
技术领域
本发明涉及通信技术领域,尤其涉及一种海量的CDN节点资源部署系统和方法。
背景技术
随着互联网的快速发展及网络用户的日益普及,网络资源越发紧张,不仅给现有资源带来巨大压力,同时在业务和应用需求不断增加的情况下,用来购买硬件和网络维护的成本不断攀升,这种网络发展方式给企业信息化的发展带来了很大障碍。
时下在互联网服务领域,CDN(ContentDeliveryNetwork,内容分发网络)节点无疑是一大热点。CDN节点是在现有互联网络中增加一层新的网络架构,通过CDN节点将客户网站的内容发布到最接近用户的网络“边缘”,使用户可以就近取得所需的内容,从而解决网络拥挤的状况,提高网民访问速度。由于CDN节点在CDN服务中起到了非常关键的数据存储作用,因此CDN节点数量及部署策略对CDN服务能力起到至关重要的作用。然而目前仍没有海量的CDN节点部署系统和方法。
发明内容
本发明的目的在于提供一种海量的CDN节点资源部署系统和方法,其能够降低网络发展成本、解决网络拥挤状况且能够提高网络访问速度。
为解决上述技术问题,发明采用如下所述的技术方案。一种海量的CDN节点资源部署系统,所述系统包括服务器集群和若干CDN节点,所述服务器集群包括控制服务器、统计服务器、部署服务器、分发服务器及索引服务器;所述控制服务器包括控制单元,所述控制单元用于控制所述CDN节点的开启与关闭;所述统计服务器包括统计单元,所述统计单元用于进行资源统计和用户分级统计以得到网络资源需求数据;所述部署服务器包括部署单元,所述部署单元用于根据所述网络资源需求数据制定网络资源分配方案;所述分发服务器包括分发单元和生成单元,所述分发单元用于根据所述网络资源分配方案将网络资源分发给所述CDN节点,所述生成单元用于生成文件索引目录;所述索引服务器包括查找单元,所述索引单元用于根据用户的访问请求查找所述文件索引目录以获得若干对应的CDN节点,所述对应的CDN节点与用户连接以供给用户请求的网络资源数据。
优选地,所述资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。
优选地,所述用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。
优选地,所述分单元根据所述网络资源分配方案将网络资源分发给所述CDN节点还包括:所述CDN节点之间还通过P2P网络进行网络资源的分发,以加快部署效率。。
一种海量的CDN节点资源部署方法,所述方法包括以下步骤:进行资源统计和用户分级统计以得到网络资源需求数据;根据所述网络资源需求数据制定网络资源分配方案;根据所述网络资源分配方案将网络资源分发给所述CDN节点,并生成文件索引目录;根据用户的访问请求查找所述文件索引目录以获得若干对应的CDN节点,所述对应的CDN节点与用户连接以供给用户请求的网络资源数据。
优选地,所述资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。
优选地,所述用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。
优选地,根据所述网络资源分配方案将网络资源分发给所述CDN节点还包括:所述CDN节点之间还通过P2P网络进行网络资源的分发,以加快部署效率。
有益技术效果在于:该海量的CDN节点资源部署系统的统计单元用于进行资源统计和用户分级统计以得到网络资源需求数据,部署单元根据所述网络资源需求数据制定网络资源分配方案,分发单元根据所述网络资源分配方案将网络资源分发给CDN节点,生成单元生成文件索引目录,索引单元根据用户的访问请求查找文件索引目录以获得若干对应的CDN节点,对应的CDN节点与用户连接以供给用户请求的网络资源数据。藉由这种海量CDN节点的设置,用户可以通过就近的CDN节点来获取所需的网络资源,解决了目前网络拥挤的状况,从而提高网络访问速度。同时藉由海量CDN节点的部署,不需增加额外成本进行网络硬件的购买,一方面降低了购买成本和维护成本,同时提高企业网络信息化发展的进度。
附图说明
图1是较佳实施例的海量的CDN节点资源部署系统的结构框图。
图2是较佳实施例的海量的CDN节点资源部署方法的流程图。
具体实施方式
为使本领域的普通技术人员更加清楚地理解发明的目的、技术方案和优点,以下结合附图和实施例对发明做进一步的阐述。
参照图1所示,其为海量的CDN节点资源部署系统的结构框图。该海量的CDN节点资源部署系统10包括服务器集群11和若干CDN节点12。该服务器集群11包括控制服务器、统计服务器、部署服务器、分发服务器114及索引服务器115。其中,控制服务器包括控制单元111,其用于控制CDN节点12的开启与关闭。统计服务器包括统计单元112,其用于进行资源统计和用户分级统计以得到网络资源需求数据。部署服务器包括部署单元113,其用于根据该网络资源需求数据制定网络资源分配方案。分发服务器包括分发单元114和生成单元115,,分发单元114用于根据网络资源分配方案将网络资源分发给CDN节点112,生成单元115用于生成文件索引目录。索引服务器包括索引单元115,其用于根据用户的访问请求查找文件索引目录以获得对应的CDN节点,CDN节点与用户连接以供给用户请求的网络资源数据。藉由这种海量CDN节点的设置,用户可以通过就近的CDN节点来获取所需的网络资源,解决了目前网络拥挤的状况,从而提高网络访问速度。同时藉由海量CDN节点的部署,不需增加额外成本进行网络硬件的购买,一方面降低了购买成本和维护成本,同时提高企业网络信息化发展的进度。
优选地,在本实施例中,资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。如统计华南、华北、华东三个区域,并针对资源如视频文件进行三个区域内用户的访问频率及传输数据的实时统计,依此得到三个区域内的用户对视频文件的访问需求数据。优选地,在本实施例中,用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。网络设备性能是指针对硬件设备的性能不同进行统计,如吞吐量和包延迟。吞吐量是指单位时间内传送通过网络的给定点的平均比特数,单位为b/S(比特/秒)。包延迟是指数据分组的最后一位从到达网络的工作站到通过网络送至目的工作站所用的时间。网络性能包括网络延时、网络抖动、丢包率及下载速率等。地域划分如华南、华北、华东等。网络运营商如三大商家,中国电信、中国联通及中国移动。用户分级就是根据网络设备性能、网络性能、地域及运营商对用户进行分级管理,以获取用户分级数据。统计单元112根据资源统计和用户分级实时计算网络资源需求数据,并将该网络资源需求数据发送给部署单元113,以供部署单元113合理制定网络资源分配方案,以提高资源分配的最优化。
优选地,在本实施例中,分发单元114根据网络资源分配方案将网络资源分发给CDN节点12之外,CDN节点12之间还通过P2P网络进行网络资源的分发,以加快部署效率。在资源部署时,若干CDN节点12接收服务器集群11分配的资源,且相邻的CDN节点12之间通过P2P渠道资源传送,CDN节点12之间采用P2P网络进行分发,加快部署效率。
P2P网络是一种网络模型,P2P网络中的各节点在功能以及地位上是平等的,对等的节点之间可以直接连接而共享、传递资源,并不需要集中服务器中转。与传统的客户端/服务器网络模式相比,P2P网络能够更好的利用网络资源、减轻服务器负担及消除服务器瓶颈等优点。每一个节点都同时时资源的使用、资源的提供者以及通讯等三方面功能,每一个节点拥有的权利和义务是相等的。P2P网络弱化了服务器的功能,将信息数量、成本资源都此昂网络节点均匀地分布,实现网络各节点的负载均衡。资源在对等节点之间直接传递,高速、及时,从而加快部署效率。
参照图2所示,较佳实施例海量的CDN节点资源部署方法20的流程图。该方法20包括以下步骤:
201:进行资源统计和用户分级统计以得到网络资源需求数据。具体地,在本实施例中,资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。如统计华南、华北、华东三个区域,并针对资源如视频文件进行三个区域内用户的访问频率及传输数据的实时统计,依此得到三个区域内的用户对视频文件的访问需求数据。在本实施例中,用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。网络设备性能是指针对硬件设备的性能不同进行统计,如吞吐量和包延迟。吞吐量是指单位时间内传送通过网络的给定点的平均比特数,单位为b/S(比特/秒)。包延迟是指数据分组的最后一位从到达网络的工作站到通过网络送至目的工作站所用的时间。网络性能包括网络延时、网络抖动、丢包率及下载速率等。地域划分如华南、华北、华东等。网络运营商如三大商家,中国电信、中国联通及中国移动。用户分级就是根据网络设备性能、网络性能、地域及运营商对用户进行分级管理,以获取用户分级数据。统计服务器根据资源统计和用户分级实时计算网络资源需求数据,并将该网络资源需求数据发送给部署服务器,以供部署服务器合理制定网络资源分配方案,以提高资源分配的最优化。
202:根据网络资源需求数据制定网络资源分配方案。具体地,在本实施例中,部署服务器根据网络需求数据制定合理的网络资源分配方案。
203:根据网络资源分配方案将网络资源分发给CDN节点,并生成文件索引目录。具体地,在本实施例中,分发服务器根据网络资源分配方案将网络资源分发给CDN节点之外,CDN节点之间还通过P2P网络进行网络资源的分发,以加快部署效率。在资源部署时,若干CDN节点接收服务器集群分配的资源,且相邻的CDN节点之间通过P2P渠道资源传送,CDN节点之间采用P2P网络进行分发,加快部署效率。
204:根据用户的访问请求查找文件索引目录以获得若干对应的CDN节点,对应的CDN节点与用户连接以供给用户请求的网络资源数据。具体地,在本实施例中,用户向索引服务器发送访问请求后,索引服务器根据用户请求查找索引目录以找到包含访问请求数据的若干CDN节点用户通过连接对应的CDN节点就能够就近的获得所请求的数据。藉由这种海量CDN节点的设置,用户可以通过就近的CDN节点来获取所需的网络资源,解决了目前网络拥挤的状况,从而提高网络访问速度。同时藉由海量CDN节点的部署,不需增加额外成本进行网络硬件的购买,一方面降低了购买成本和维护成本,同时提高企业网络信息化发展的进度。
以上所述仅为发明的优选实施例,而非对发明做任何形式上的限制。本领域的技术人员可在上述实施例的基础上施以各种等同的更改和改进,凡在权利要求范围内所做的等同变化或修饰,均应落入发明的保护范围之内。

Claims (8)

1.一种海量的CDN节点资源部署系统,其特征在于:所述系统包括服务器集群和若干CDN节点,所述服务器集群包括控制服务器、统计服务器、部署服务器、分发服务器及索引服务器;
所述控制服务器包括控制单元,所述控制单元用于控制所述CDN节点的开启与关闭;
所述统计服务器包括统计单元,所述统计单元用于进行资源统计和用户分级统计以得到网络资源需求数据;
所述部署服务器包括部署单元,所述部署单元用于根据所述网络资源需求数据制定网络资源分配方案;
所述分发服务器包括分发单元和生成单元,所述分发单元用于根据所述网络资源分配方案将网络资源分发给所述CDN节点,所述生成单元用于生成文件索引目录;
所述索引服务器包括查找单元,所述索引单元用于根据用户的访问请求查找所述文件索引目录以获得若干对应的CDN节点,所述对应的CDN节点与用户连接以供给用户请求的网络资源数据。
2.如权利要求1所述的海量的CDN节点资源部署系统,其特征在于:所述资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。
3.如权利要求1所述的海量的CDN节点资源部署系统,其特征在于:所述用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。
4.如权利要求1所述的海量的CDN节点资源部署系统,其特征在于:所述分发单元根据所述网络资源分配方案将网络资源分发给所述CDN节点还包括:所述CDN节点之间还通过P2P网络进行网络资源的分发,以加快部署效率。
5.一种海量的CDN节点资源部署方法,其特征在于,所述方法包括以下步骤:
进行资源统计和用户分级统计以得到网络资源需求数据;
根据所述网络资源需求数据制定网络资源分配方案;
根据所述网络资源分配方案将网络资源分发给所述CDN节点,并生成文件索引目录;
根据用户的访问请求查找所述文件索引目录以获得若干对应的CDN节点,所述对应的CDN节点与用户连接以供给用户请求的网络资源数据。
6.如权利要求5所述的海量的CDN节点资源部署方法,其特征在于:所述资源统计是指针对资源按照不同的区域进行访问频率及传输数据的实时统计,以得到不同区域对网络资源的访问需求数据。
7.如权利要求5所述的海量的CDN节点资源部署方法,其特征在于:所述用户分级是指根据网络设备性能、网络性能、地区、运营商进行分级管理,以得到用户分级数据。
8.如权利要求5所述的海量的CDN节点资源部署方法,其特征在于:根据所述网络资源分配方案将网络资源分发给所述CDN节点还包括:所述CDN节点之间还通过P2P网络进行网络资源的分发,以加快部署效率。
CN201510764284.6A 2015-11-10 2015-11-10 一种海量的cdn节点资源部署系统和方法 Active CN105450535B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510764284.6A CN105450535B (zh) 2015-11-10 2015-11-10 一种海量的cdn节点资源部署系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510764284.6A CN105450535B (zh) 2015-11-10 2015-11-10 一种海量的cdn节点资源部署系统和方法

Publications (2)

Publication Number Publication Date
CN105450535A true CN105450535A (zh) 2016-03-30
CN105450535B CN105450535B (zh) 2018-11-27

Family

ID=55560331

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510764284.6A Active CN105450535B (zh) 2015-11-10 2015-11-10 一种海量的cdn节点资源部署系统和方法

Country Status (1)

Country Link
CN (1) CN105450535B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106301905A (zh) * 2016-08-10 2017-01-04 中国联合网络通信集团有限公司 一种评估cdn部署合理性的方法及装置
CN107707379A (zh) * 2017-06-29 2018-02-16 贵州白山云科技有限公司 一种cdn覆盖方案生成方法和装置
CN108667935A (zh) * 2018-05-11 2018-10-16 深圳市网心科技有限公司 网络业务方法、服务器、网络系统和存储介质
CN108683728A (zh) * 2018-05-11 2018-10-19 深圳市网心科技有限公司 数据传输方法、服务器、终端、网络系统和存储介质
CN110493357A (zh) * 2019-09-16 2019-11-22 深圳市网心科技有限公司 一种资源部署方法、系统、装置及计算机存储介质
CN110839069A (zh) * 2019-11-04 2020-02-25 深圳市网心科技有限公司 一种节点数据部署方法、部署节点、系统及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101039329A (zh) * 2006-12-28 2007-09-19 中兴通讯股份有限公司 基于媒体交付的网络电视系统的媒体交付系统
CN101146021A (zh) * 2006-09-11 2008-03-19 思华科技(上海)有限公司 内容分发网络的路由系统及方法
US7716367B1 (en) * 2000-07-20 2010-05-11 Akamai Technologies, Inc. Network performance monitoring in a content delivery service
CN102104631A (zh) * 2011-02-28 2011-06-22 南京邮电大学 一种基于云端计算技术的知识系统中的服务质量保障方法
CN103763209A (zh) * 2014-01-03 2014-04-30 上海聚力传媒技术有限公司 一种cdn服务器的调度方法与装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7716367B1 (en) * 2000-07-20 2010-05-11 Akamai Technologies, Inc. Network performance monitoring in a content delivery service
CN101146021A (zh) * 2006-09-11 2008-03-19 思华科技(上海)有限公司 内容分发网络的路由系统及方法
CN101039329A (zh) * 2006-12-28 2007-09-19 中兴通讯股份有限公司 基于媒体交付的网络电视系统的媒体交付系统
CN102104631A (zh) * 2011-02-28 2011-06-22 南京邮电大学 一种基于云端计算技术的知识系统中的服务质量保障方法
CN103763209A (zh) * 2014-01-03 2014-04-30 上海聚力传媒技术有限公司 一种cdn服务器的调度方法与装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106301905A (zh) * 2016-08-10 2017-01-04 中国联合网络通信集团有限公司 一种评估cdn部署合理性的方法及装置
CN106301905B (zh) * 2016-08-10 2019-05-14 中国联合网络通信集团有限公司 一种评估cdn部署合理性的方法及装置
CN107707379A (zh) * 2017-06-29 2018-02-16 贵州白山云科技有限公司 一种cdn覆盖方案生成方法和装置
CN107707379B (zh) * 2017-06-29 2019-04-02 贵州白山云科技股份有限公司 一种cdn覆盖方案生成方法和装置
CN108667935A (zh) * 2018-05-11 2018-10-16 深圳市网心科技有限公司 网络业务方法、服务器、网络系统和存储介质
CN108683728A (zh) * 2018-05-11 2018-10-19 深圳市网心科技有限公司 数据传输方法、服务器、终端、网络系统和存储介质
CN110493357A (zh) * 2019-09-16 2019-11-22 深圳市网心科技有限公司 一种资源部署方法、系统、装置及计算机存储介质
CN110839069A (zh) * 2019-11-04 2020-02-25 深圳市网心科技有限公司 一种节点数据部署方法、部署节点、系统及介质
CN110839069B (zh) * 2019-11-04 2021-09-24 深圳市网心科技有限公司 一种节点数据部署方法、部署节点、系统及介质

Also Published As

Publication number Publication date
CN105450535B (zh) 2018-11-27

Similar Documents

Publication Publication Date Title
CN105450535A (zh) 一种海量的cdn节点资源部署系统和方法
Anjum et al. Survey on peer-assisted content delivery networks
Aral et al. A decentralized replica placement algorithm for edge computing
Wen et al. Effective load balancing for cloud-based multimedia system
Li et al. CaaS: Caching as a service for 5G networks
CN107241374B (zh) 负载平衡系统、负载平衡装置及拓朴管理方法
US20110078230A1 (en) Method and system for providing a cdn with granular quality of service
CN103581245A (zh) 一种内容分发网络内容分发的方法及系统
US20200021859A1 (en) Multicast implementation method and related network device
Fan et al. Video delivery networks: Challenges, solutions and future directions
WO2018145376A1 (zh) 一种无线设备共享带宽的控制方法及系统
CN104967866B (zh) 一种动态自适应的p2p直播流媒体子流调度方法
Panchenko et al. Method for adaptive client oriented management of quality of service in integrated SDN/CLOUD networks
CN103037015A (zh) 一种p2p数据主动分发方法及节点客户端
CN102780710A (zh) 基于内容分发网络的节点调度方法
Wang et al. PLVER: Joint stable allocation and content replication for edge-assisted live video delivery
Kyung et al. A load distribution scheme over multiple controllers for scalable SDN
CN105577646A (zh) 用户侧带宽聚合的方法、设备和内容分发系统
Muhammad et al. Delay-aware multi-source multicast resource optimization in NFV-enabled network
CN103188278B (zh) 内容数据分发的方法和系统
CN103037017A (zh) 一种p2p数据被动分发方法及节点客户端
CN105162720A (zh) 一种减少数据传输的通信网络及方法
Jiang Wireless resource management mechanism with green communication for multimedia streaming
Cui et al. Content-aware load balancing in CDN network
Li et al. Controller Cluster-Based Interconnecting for Multi-domain SDN Networks

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant