CN110061877A - 一种cdn智能调度方法、系统、调度器及cdn系统 - Google Patents
一种cdn智能调度方法、系统、调度器及cdn系统 Download PDFInfo
- Publication number
- CN110061877A CN110061877A CN201910327606.9A CN201910327606A CN110061877A CN 110061877 A CN110061877 A CN 110061877A CN 201910327606 A CN201910327606 A CN 201910327606A CN 110061877 A CN110061877 A CN 110061877A
- Authority
- CN
- China
- Prior art keywords
- user
- resource
- class
- quality
- idc
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0823—Configuration setting characterised by the purposes of a change of settings, e.g. optimising configuration for enhancing reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0893—Assignment of logical groups to network elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5003—Managing SLA; Interaction between SLA and QoS
- H04L41/5019—Ensuring fulfilment of SLA
- H04L41/5022—Ensuring fulfilment of SLA by giving priorities, e.g. assigning classes of service
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种CDN智能调度方法、系统、调度器及CDN系统,将用户分为N类,将N类用户的分配权按从高到低的顺序排列;将IDC资源按照质量从好到坏的顺序排列,并划分为M个类型;匹配用户的分配权排序和IDC资源质量排序,为各用户分配资源。本发明可使付费用户获得更好的使用体验,还能提升平台资源利用率,使平台内容得到更好的传播,间接起到为平台引流的作用。
Description
技术领域
本发明涉及内容分发网络,具体是一种CDN智能调度方法、系统、调度器及CDN系统。
背景技术
调度器是CDN(内容分发网络)系统中的一个子系统,他的功能主要是为用户分配资源地址,供用户后续使用。由于整个CDN资源是有限的,在有限的资源下各个IDC机房的服务质量也是存在差异的,如何合理分配IDC资源对于整个平台来说至关重要。现有模式下会员用户在IDC资源质量方面没有改善,与普通用户无异,甚至有可能将优质IDC资源分配给盗链用户。会员收入是平台的重要收入来源,如果能从CDN系统角度提高会员用户的使用体验,势必可以吸引更多付费用户。同时将闲暇时段的资源加以合理利用,在整体成本不变的情况下,可以使平台内容得到更好的传播,起到引流的效果。
发明内容
本发明所要解决的技术问题是,针对现有技术不足,提供一种CDN智能调度方法、系统、调度器及CDN系统,有效节约平台资源成本,提升平台资源利用率,使平台内容得到更好的传播,间接起到为平台引流的作用。
为解决上述技术问题,本发明所采用的技术方案是:一种CDN智能调度方法,该方法主要实现过程为:
将用户分为N类,将N类用户的分配权按从高到低的顺序排列;
将IDC资源按照质量从好到坏的顺序排列,并划分为M个类型;
根据用户的分配权排序和IDC资源质量排序,为各用户分配资源。
本发明中,分配权最高的用户可以享受所有IDC资源,且优先获得优质资源;分配权次高的用户在优质资源不够时,按资源质量等级顺延分配;依此类推,只有在资源剩余时,才将剩余的资源分配给分配权低的用户,从而有效节约平台资源成本。
本发明根据会员参数标识,判断当前用户是会员还是普通用户;判断当前用户是否为疑似盗链用户或盗链用户;将用户分为:会员用户、普通用户、疑似盗链用户、盗链用户;将IDC资源分为以下4类:一类资源、二类资源、三类资源、四类资源;其中一类资源、二类资源、三类资源、四类资源的质量由好到坏;为各用户分配资源的方法如下:会员用户可以享受所有的IDC资源,并获得最优质资源的优先分配权;普通用户可享受所有资源,当优质资源不够用时,会员用户享受优先分配权,普通用户按资源质量等级顺延分配;疑似盗链用户只可分配第四类资源;当分配给会员用户、普通用户、疑似盗链用户后,资源剩余时,将剩余的资源分配给盗链用户,否则,拒绝分配资源给盗链用户。将疑似盗链用户分配至最差IDC机房,主要考虑到疑似盗链用户如果直接拒绝服务,可能存在误杀正常用户的情况。该方案分配至四类资源可保证用户使用正常的前提下,不占用平台优质资源;将盗链用户直接拒绝或非优先分配至最差IDC机房,可有效节约平台资源成本,并在四类资源富余的情况下,适当给盗链用户提供服务,可提升平台资源利用率,使平台内容得到更好的传播,间接起到为平台引流的作用。
相应的,本发明还提供了一种CDN智能调度系统,其包括:
IDC机房质量分析服务器,用于将IDC资源按照该质量排名划分为M个类型,并将该M个类型的IDC资源按质量从好到坏的顺序排列;
调度器,用于将用户分为N类,将N类用户的分配权按从高到低的顺序排列;根据用户的分配权排序和IDC资源质量排序,为各用户分配资源。
作为一个发明构思,本发明还提供了一种调度器,其包括:
分类排序单元,用于将用户分为N类,将N类用户的分配权按从高到低的顺序排列;
分配单元,用于根据用户的分配权排序和IDC资源质量排序,为各用户分配资源。
相应地,本发明还提供了一种CDN系统,包括客户端;所述客户端与上述调度器耦合。
本发明所提调度器与客户端耦合,是指调度器与客户端双向通信。
与现有技术相比,本发明所具有的有益效果为:
1、本发明充分考虑了各类型用户对于平台的价值所在,根据价值不同将CDN资源予以相应倾斜,在整体成本可控的前提下,有益于提高付费用户的使用体验,并将富余资源予以合理利用。
2、将疑似盗链用户分配至最差IDC机房,主要考虑到疑似盗链用户如果直接拒绝服务,可能存在误杀正常用户的情况。该方案分配至四类资源可保证用户使用正常的前提下,不占用平台优质资源。
3、将盗链用户直接拒绝或非优先分配至最差IDC机房,可有效节约平台资源成本,并在四类资源富余的情况下,适当给盗链用户提供服务,可提升平台资源利用率,使平台内容得到更好的传播,间接起到为平台引流的作用。
附图说明
图1为本发明系统原理图。
具体实施方式
IDC机房质量分析服务负责收集分析各IDC机房质量,根据机房卡顿比、错误率等指标,综合计算出IDC机房质量排名。最终将IDC资源分为4个类型,按质量好坏排序如下:一类资源 > 二类资源 > 三类资源 > 四类资源,并将归类后的IDC资源数据发送到调度器。
客户端每分钟会上报一次用户状态,正常情况下上报状态正常,如果发生卡顿则上报用户卡顿,最终计算出这一分钟卡顿比=卡顿次数/总上报次数。客户端每次请求会上报是否请求成功,正常情况下上报请求成功,否则上报请求失败,错误率=请求失败次数/总上报次数。错误率越低,卡顿比越低,机房质量就越好。
调度器根据客户端加密发送的会员参数标识,判断当前用户是会员还是普通用户,并根据防盗链模块判断当前用户是否疑似盗链用户或盗链用户。最终将用户分为如下4类:A类(会员用户),B类(普通用户),C类(疑似盗链用户),D类(盗链用户),当然最终用户分类可根据业务需要动态调整。
用户划分举例如下:
A类,是指购买了芒果TV会员的用户,或者试用会员的用户。
B类,是指未购买芒果TV会员的用户。
C类,被防盗链模块判定为疑似盗链的用户,但介于当前CDN资源富余,对成本不造成影响,故适当提供服务。
D类,被防盗链模块判定为盗链的用户,CDN资源紧张,故不提供服务。
防盗链模块具备多种防盗链识别手段,包括但不限于利用以下指标完成盗链检测: Referrer地址,UserAgent类型,IP白名单,IP黑名单,代理IP地址,请求文件类型,是否观看广告,请求地址是否在有效期内等等。
CDN调度器针对每一个业务类型会分配一个PNO(业务标识号),如AphoneAPP,Aphone网页,PCweb网页,PCH5,PCclient,微博分享,湖南移动免流等等,针对以上每一个业务类型在实际请求CDN调度器时会存在不同的特征。
如AphoneAPP用户请求,会在UserAgent中携带Android系统标识。CDN调度器在处理用户请求时如果发现AphoneAPP对应的PNO发起的请求,并没有携带Android标识时,即可认为是非法请求。
如Referrer地址会携带用户当前请求网页的地址,CDN调度器可以判断当前地址是否允许,进而判断是否为盗链用户。
再如是否观看广告,是一种双方妥协的做法,如果用户观看了广告,则说明已经为平台产生了收益,即使是盗链请求亦可提供服务。
IP黑名单是通过大数据分析,判断用户IP在整个平台中是否合理存在。首先单位时间内请求超过一定次数的IP可以认定为非法IP,如1分钟请求超过100次。其次1秒钟请求超过10次的亦可认为是非法IP,因为正常人操作无法达到这个速度。再者整个系统是相互衔接运行的,用户不能跳过当中某一个环节请求,如用户IP未出现在系统中任何一个位置,却直接发起CDN调度请求,亦可认为是非法IP。
IP白名单:某些业务为运营商定制业务,如湖南移动定制,山东联通定制则只允许湖南移动IP段,山东联通IP段访问该业务。或者某些内部业务,仅允许公司内部访问,则可以设置IP白名单。
代理IP地址:某些场景如校园网用户,网吧用户,会使用统一代理IP请求,甚至是多层代理,此类用户在做黑白名单校验时,需要充分考虑IP代理的情况。
请求文件类型:不同业务会使用不同文件类型提供服务,如mp4,m3u8,ts文件,不同业务端会使用其中一项或多项文件服务,如果请求文件类型不在服务范围内,则判定为非法用户。
请求地址是否在有效期内:CDN调度器为合理保护资源,对每个调度地址都会设置长短不一的过期时间,超过该时间即认为是盗链。但某些场景下客户端会缓存CDN调度地址,如客户端缓存系统,浏览器自动缓存,离线下载等,此类场景为正常缓存。为保证上述场景正常请求,在CDN资源富余时亦可提供服务。
调度器参考用户分类数据、IDC资源质量数据为用户分配资源,具体分配规则参考下表。
上表可简单理解为A类用户可以享受任何资源,并获得最优质资源的优先分配权。B类用户也可享受所有资源,但当优质资源不够用时,A类用户享受优先分配权,B类用户将按资源质量等级顺延分配。C类用户将只可分配四类资源,即平台最差资源。D类确认盗链用户不优先享受四类资源,即当四类资源不够用时,可以直接拒绝用户,仅到四类资源富余时才分配给D类用户。
注:非优先分配表示资源富余时可分配,资源紧张时不分配。
以上给出的是N=M时资源分配的示例。实际应用中,N可以大于M,也可以小于M。
Claims (10)
1.一种CDN智能调度方法,其特征在于,该方法主要实现过程为:
将用户分为N类,将N类用户的分配权按从高到低的顺序排列;
将IDC资源按照质量从好到坏的顺序排列,并划分为M个类型;
根据用户的分配权排序和IDC资源质量类型,为各用户分配资源。
2.根据权利要求1所述的CDN智能调度方法,其特征在于,根据IDC机房卡顿比、错误率计算出IDC机房质量排名,将IDC资源分为M个类型。
3.根据权利要求1所述的CDN智能调度方法,其特征在于,分配权最高的用户可以享受所有IDC资源,且优先获得优质资源;分配权次高的用户在优质资源不够时,按资源质量等级顺延分配;依此类推,只有在资源剩余时,才将剩余的资源分配给分配权低的用户。
4.根据权利要求1~3之一所述的CDN智能调度方法,其特征在于,将用户分为N类的具体实现过程包括:根据会员参数标识,判断当前用户是会员还是普通用户;判断当前用户是否为疑似盗链用户或盗链用户;将用户分为:会员用户、普通用户、疑似盗链用户、盗链用户;将IDC资源分为以下4类:一类资源、二类资源、三类资源、四类资源;其中一类资源、二类资源、三类资源、四类资源的质量由好到坏。
5.根据权利要求4所述的CDN智能调度方法,其特征在于,为各用户分配资源的方法如下:会员用户可以享受所有的IDC资源,并获得最优质资源的优先分配权;普通用户可享受所有资源,当优质资源不够用时,会员用户享受优先分配权,普通用户按资源质量等级顺延分配;疑似盗链用户只可分配第四类资源;当分配给会员用户、普通用户、疑似盗链用户后,资源剩余时,将剩余的资源分配给盗链用户,否则,拒绝分配资源给盗链用户。
6.一种CDN智能调度系统,其特征在于,包括:
IDC机房质量分析服务器,用于将IDC资源按照质量从好到坏的顺序排列,并划分为M个类型;
调度器,用于将用户分为N类,将N类用户的分配权按从高到低的顺序排列;根据用户的分配权排序和IDC资源质量排序,为各用户分配资源。
7.根据权利要求6所述的CDN智能调度系统,其特征在于,用户类型包括:会员用户、普通用户、疑似盗链用户、盗链用户;IDC资源类型包括:一类资源、二类资源、三类资源、四类资源。
8.根据权利要求7所述的CDN智能调度系统,其特征在于,调度器为各用户分配资源的方法如下:会员用户可以享受所有的IDC资源,并获得最优质资源的优先分配权;普通用户可享受所有资源,当优质资源不够用时,会员用户享受优先分配权,普通用户按资源质量等级顺延分配;疑似盗链用户只可分配第四类资源;当分配给会员用户、普通用户、疑似盗链用户后,资源剩余时,将剩余的资源分配给盗链用户,否则,拒绝分配资源给盗链用户。
9.一种调度器,其特征在于,包括:
分类排序单元,用于将用户分为N类,将N类用户的分配权按从高到低的顺序排列;
分配单元,用于根据用户的分配权排序和IDC资源质量排序,为各用户分配资源。
10.一种CDN系统,包括客户端;其特征在于,所述客户端与权利要求9所述的调度器耦合。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910327606.9A CN110061877A (zh) | 2019-04-23 | 2019-04-23 | 一种cdn智能调度方法、系统、调度器及cdn系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910327606.9A CN110061877A (zh) | 2019-04-23 | 2019-04-23 | 一种cdn智能调度方法、系统、调度器及cdn系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110061877A true CN110061877A (zh) | 2019-07-26 |
Family
ID=67320161
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910327606.9A Pending CN110061877A (zh) | 2019-04-23 | 2019-04-23 | 一种cdn智能调度方法、系统、调度器及cdn系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110061877A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110865817A (zh) * | 2019-11-01 | 2020-03-06 | 湖北省楚天云有限公司 | 一种云计算平台资源计量方法和系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103763209A (zh) * | 2014-01-03 | 2014-04-30 | 上海聚力传媒技术有限公司 | 一种cdn服务器的调度方法与装置 |
CN105898402A (zh) * | 2015-11-13 | 2016-08-24 | 乐视云计算有限公司 | 网络调度方法和系统 |
CN109040259A (zh) * | 2018-08-09 | 2018-12-18 | 中国联合网络通信集团有限公司 | 一种基于mec的cdn节点分配方法和系统 |
-
2019
- 2019-04-23 CN CN201910327606.9A patent/CN110061877A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103763209A (zh) * | 2014-01-03 | 2014-04-30 | 上海聚力传媒技术有限公司 | 一种cdn服务器的调度方法与装置 |
CN105898402A (zh) * | 2015-11-13 | 2016-08-24 | 乐视云计算有限公司 | 网络调度方法和系统 |
CN109040259A (zh) * | 2018-08-09 | 2018-12-18 | 中国联合网络通信集团有限公司 | 一种基于mec的cdn节点分配方法和系统 |
Non-Patent Citations (1)
Title |
---|
李梓: "数字音乐网络维权:道德无力", 《新世纪周刊》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110865817A (zh) * | 2019-11-01 | 2020-03-06 | 湖北省楚天云有限公司 | 一种云计算平台资源计量方法和系统 |
CN110865817B (zh) * | 2019-11-01 | 2024-04-05 | 湖北省楚天云有限公司 | 一种云计算平台资源计量方法和系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104270417B (zh) | 一种基于云计算的综合服务提供系统及方法 | |
CN103069406B (zh) | 对于多个客户机管理流媒体带宽 | |
Frieden | Internet packet sniffing and its impact on the network neutrality debate and the balance of power between intellectual property creators and consumers | |
CN104283961B (zh) | 社区管理集成云服务平台及方法 | |
Rubinfeld et al. | Open access to broadband networks: a case study of the AOL/Time Warner merger | |
Liu et al. | A mobile edge computing (MEC)-enabled transcoding framework for blockchain-based video streaming | |
CN106210153A (zh) | 一种资源信息的推送方法、系统及其电子设备 | |
CN109246858A (zh) | 数据流量共享方法、系统及存储介质 | |
CN106302649A (zh) | 一种基于传统媒体的互动分配系统及其方法 | |
Minne | Data caps: How ISPs are stunting the growth of online video distributors and what regulators can do about it | |
CN110061877A (zh) | 一种cdn智能调度方法、系统、调度器及cdn系统 | |
Frieden | Invoking and Avoiding the First Amendment: How Internet Service Providers Leverage Their Status as Both Content Creators and Neutral Conduits | |
CN100387033C (zh) | 一种实现网络电视消息业务的方法及系统 | |
Odlyzko | Will smart pricing finally take off? | |
CN107567024A (zh) | 一种商业wifi的使用方法 | |
Buccirossi et al. | Competition in the internet backbone market | |
Frieden | The Impact of Next Generation Television on Consumers and the First Amendment | |
US20060242675A1 (en) | Return path management system and method | |
Friederiszick et al. | Assessment of a sustainable Internet model for the near future | |
CN112491577A (zh) | 一种带宽加速方法和系统 | |
CN111541619A (zh) | 企业信息联网核查系统的自适应主动负载调节方法和装置 | |
CN101068240A (zh) | 短信恶意群发控制器 | |
CN109995703A (zh) | 一种数据源安全检查方法及边缘服务器 | |
CN104769619A (zh) | 通过基于订阅的信息生态系统经纪用户的收费广播的方法、系统和计算机程序 | |
Monath et al. | Economical analysis of experience-optimized service delivery |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190726 |
|
RJ01 | Rejection of invention patent application after publication |