CN114338705B - 内容分发网络cdn节点的资源水位控制方法、设备及介质 - Google Patents
内容分发网络cdn节点的资源水位控制方法、设备及介质 Download PDFInfo
- Publication number
- CN114338705B CN114338705B CN202111404584.5A CN202111404584A CN114338705B CN 114338705 B CN114338705 B CN 114338705B CN 202111404584 A CN202111404584 A CN 202111404584A CN 114338705 B CN114338705 B CN 114338705B
- Authority
- CN
- China
- Prior art keywords
- service request
- network node
- water level
- target
- specified service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 title claims abstract description 254
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000008569 process Effects 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 14
- 239000002699 waste material Substances 0.000 description 7
- 238000013459 approach Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000000670 limiting effect Effects 0.000 description 4
- 239000000306 component Substances 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 239000008358 core component Substances 0.000 description 2
- 230000007423 decrease Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
Abstract
本公开实施例公开了一种内容分发网络CDN节点的资源水位控制方法、设备及介质。所述方法包括:获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽;根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
Description
技术领域
本公开涉及计算机网络技术领域,具体涉及一种内容分发网络CDN节点的资源水位控制方法、设备及介质。
背景技术
CDN(Content Delivery Network,内容分发网络)的接入网调度系统作为CDN产品的核心组件,负责将用户的服务请求调度到适当(例如,访问速度最快)的CDN边缘节点,并保证CDN各节点的资源水位保持在合理的水平。节点的资源水位表示所述资源的使用量或使用率,例如包括带宽、CPU(Central Processing Unit,中央处理单元)等维度。当资源为带宽时,水位可以是带宽的使用量(即,使用的带宽的数值)或带宽的使用率(即,使用的带宽占可用带宽的比例),当资源为CPU时,水位可以是CPU使用率。水位太高会显著恶化服务质量,水位太低会造成成本浪费。因此,精准合理地控制CDN节点的资源水位,保证海量节点组成的CDN系统的稳定和成本平衡非常重要。
发明内容
为了解决相关技术中的问题,本公开实施例提供一种内容分发网络CDN节点的资源水位控制方法、设备及介质。
第一方面,本公开实施例中提供了一种内容分发网络CDN节点的资源水位控制方法,包括:
获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽;
根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
第二方面,本公开实施例中提供了一种网络节点的资源水位控制方法,包括:
获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
结合第二方面,本公开在第二方面的第一种实现方式中,所述根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
结合第二方面的第一种实现方式,本公开在第二方面的第二种实现方式中,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
结合第二方面的第一种实现方式,本公开在第二方面的第三种实现方式中,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
结合第二方面,本公开在第二方面的第四种实现方式中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
结合第二方面,本公开在第二方面的第五种实现方式中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
第三方面,本公开实施例中提供了一种内容分发网络CDN节点的资源水位控制装置,包括:
第一获取模块,被配置为获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第一确定模块,被配置为根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽;
第一控制模块,被配置为根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
第四方面,本公开实施例中提供了一种网络节点的资源水位控制装置,包括:
第二获取模块,被配置为获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第二确定模块,被配置为根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
第二控制模块,被配置为根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
结合第四方面,本公开在第四方面的第一种实现方式中,所述根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
结合第四方面的第一种实现方式,本公开在第四方面的第二种实现方式中,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
结合第四方面的第一种实现方式,本公开在第四方面的第三种实现方式中,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
结合第四方面,本公开在第四方面的第四种实现方式中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
结合第四方面,本公开在第四方面的第五种实现方式中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
第五方面,本公开实施例提供了一种电子设备,包括存储器和处理器,其中,所述存储器用于存储一条或多条设备指令,其中,所述一条或多条设备指令被所述处理器执行以实现如第一方面至第二方面的第五种实现方式中任一项所述的方法。
第六方面,本公开实施例中提供了一种设备可读存储介质,其上存储有设备指令,该设备指令被处理器执行时实现如第一方面至第二方面的第五种实现方式中任一项所述的方法。
第七方面,本公开实施例中提供了一种设备程序产品,包括设备指令,该设备指令被处理器执行时实现如第一方面至第二方面的第五种实现方式中任一项所述的方法。
根据本公开实施例提供的技术方案,根据网络节点的资源目标水位和实际水位,通过域名服务器对分配给网络节点的指定服务请求对应的占用带宽进行控制,进而控制用于处理指定服务请求的资源的水位,具有良好的实时性和准确性,无需对用户请求限速,不影响用户服务质量,可以在保证服务质量的同时,避免成本浪费。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
结合附图,通过以下非限制性实施方式的详细描述,本公开的其它特征、目的和优点将变得更加明显。在附图中:
图1A示出根据本公开实施例的网络节点的资源水位控制方法的流程图。
图1B示出根据本公开实施例的内容分发网络CDN节点的资源水位控制方法的流程图。
图2示出根据本公开实施例的网络节点的资源水位控制方法的原理示意图。
图3A示出根据本公开实施例的CDN节点的资源水位控制装置的结构框图。
图3B示出根据本公开实施例的网络节点的资源水位控制装置的结构框图。
图4示出根据本公开的实施例的电子设备的结构框图。
图5示出适于用来实现根据本公开实施例的方法的设备系统的结构示意图。
具体实施方式
下文中,将参考附图详细描述本公开的示例性实施例,以使本领域技术人员可容易地实现它们。此外,为了清楚起见,在附图中省略了与描述示例性实施例无关的部分。
在本公开中,应理解,诸如“包括”或“具有”等的术语旨在指示本说明书中所公开的特征、数字、步骤、行为、部件、部分或其组合的存在,并且不欲排除一个或多个其他特征、数字、步骤、行为、部件、部分或其组合存在或被添加的可能性。
另外还需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
在本公开中,对用户信息或用户数据的获取均为经用户授权、确认,或由用户主动选择的操作。
CDN是构建在现有网络基础之上的智能虚拟网络,依靠部署在各地的边缘服务器,通过中心平台的负载均衡、内容分发、调度等功能模块,使用户就近获取所需内容,降低网络拥塞,提高用户访问响应速度和命中率。
CDN的接入网调度系统作为CDN产品的核心组件,负责将用户的服务请求调度到适当(例如,访问速度最快)的CDN边缘节点,并保证CDN各节点的资源水位保持在合理的水平。节点的资源水位表示所述资源的使用量或使用率,例如包括带宽、CPU等维度。当资源为带宽时,水位可以是带宽的使用量或带宽的使用率,当资源为CPU时,水位可以是CPU使用率。水位太高会显著恶化服务质量,水位太低会造成成本浪费。因此,精准合理地控制CDN节点的资源水位,保证海量节点组成的CDN系统的稳定和成本平衡非常重要。
CDN节点的资源水位与CDN节点处理的请求所对应的占用带宽有关。例如用户请求观看某视频,则该请求对应的占用带宽为传输该视频数据所需的网络带宽。当CDN节点处理的请求对应的占用带宽增加时,CDN节点的资源水位通常也会相应地增加。因此,可以通过控制CDN节点处理的请求对应的占用带宽来控制CDN节点的资源水位。
目前控制CDN节点的资源水位的方法包括流量预测法、请求限速法、302调度法、CDN节点调度法等。流量预测法预测所有域名的请求对应的流量的变化情况,流量上涨时,提前将一些请求调度走,可以做到水位的提前控制。该方法的缺点是难以做到准确调度,因为预测通常是不准确的。请求限速法获得当前节点所有域名的流量情况和速度情况,通过限速的手段将单个域名的带宽进行限制,从而组合起来控制整个节点的资源水位。这种方法的缺点是人为限速降影响服务,会造成对用户的服务质量下降。302调度法将一部分请求通过302调度的方式调度到其他节点,从而在节点水位过高时实现削峰,在节点水位过低时从其他节点调度请求过来填谷。这种方法的缺点是不是所有域名和端都支持302调度,如果节点没有302域名,则无法通过这种方法来进行调度。CDN节点调度法是监测CDN节点处的资源水位,当资源水位过高时,该CDN节点将自身接收的部分请求发送到其他CDN节点。这种方法的缺点是请求在CDN节点之间的转发会造成对请求的响应延迟,影响服务质量。
为了解决上述问题,本公开提出了一种网络节点的资源水位控制方法、装置、设备、介质及程序产品。
根据本公开的实施例,一种网络节点的资源水位控制方法包括:根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
本公开的实施例根据网络节点的资源目标水位和实际水位对分配给网络节点的指定服务请求对应的占用带宽进行控制,进而控制用于处理指定服务请求的资源的水位,相比于流量预测法的实时性和准确性更好,无需对用户请求限速,通过节点资源水位控制调配指定服务请求的目的地,不影响用户服务质量,不要求网络节点支持302域名,使用范围更广。通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,避免对用户请求的响应延迟,保证服务质量。
图1A示出根据本公开实施例的网络节点的资源水位控制方法的流程图。
如图1A所示,根据本公开实施例的网络节点的资源水位控制方法包括步骤S101~S103。
在步骤S101,获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
在步骤S102,根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
在步骤S103,根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
根据本公开实施例的网络节点的资源水位控制方法可以由网络中的流量调度系统执行,例如在流量调度系统的一个或多个服务器上执行。流量调度系统通过控制DNS(Domain Name Server,域名服务器)对指定服务请求的解析策略,控制分配给网络节点的指定服务请求对应的占用带宽。当应用根据本公开的实施例的资源水位控制方法的网络是CDN网络时,流量调度系统可以由CDN接入网调度系统中的服务器实现。
应用根据本公开的实施例的资源水位控制方法的网络可以包括CDN网络、局域网、广域网等多种网络,网络节点可以包括CDN节点、物理机、虚拟机、客户端、服务器等多种节点。当应用根据本公开的实施例的资源水位控制方法的网络是CDN网络时,所述网络节点是CDN节点。
图1B示出根据本公开实施例的内容分发网络CDN节点的资源水位控制方法的流程图。
如图1B所示,一种内容分发网络CDN节点的资源水位控制方法,包括步骤S104~S106。
在步骤S104,获取CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
在步骤S105,根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽;
在步骤S106,根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
根据本公开的实施例,CDN节点可以是CDN边缘节点,也可以是CDN中继节点。CDN为多层结构,边缘节点为第一层节点,中继节点是第二层、第三层,或更高层节点。当CDN节点是CDN边缘节点时,其处理的指定服务请求来自用户的客户端。当CDN节点是CDN中继节点时,第二层节点处理的指定服务请求来自CDN边缘节点,第三层节点处理的指定服务请求来自第二层节点……以此类推。
根据本公开的实施例,资源可以包括带宽资源、CPU资源等多种资源,指定服务请求例如可以包括视频播放请求、直播观看请求等多种请求。指定服务请求可以指一类服务请求,也可以是多种服务请求的统称。例如,可以将直播观看请求称为指定服务请求,也可以将网络节点能够处理的各种服务请求统称为指定服务请求。
根据本公开的实施例,指定服务请求对应的占用带宽,是指在网络节点处理指定服务请求(例如,提供指定服务请求所请求的服务)时用于流量发送和/或接收的占用带宽。
根据本公开的实施例,网络节点的资源水位表示所述资源的使用量或使用率,例如包括带宽、CPU等维度。当资源为带宽时,水位可以是带宽的使用量或带宽的使用率,当资源为CPU时,水位可以是CPU使用率。网络节点水位太高会显著恶化服务质量,水位太低会造成成本浪费。因此,通过根据资源的目标水位和实际水位,控制分配给网络节点的指定服务请求对应的占用带宽,从而将资源的实际水位控制为接近目标水位,可以在保证服务质量的同时,避免成本浪费。
例如,当资源水位为带宽的使用量时,可以根据网络节点的资源的目标水位(即,目标带宽使用量)确定分配给网络节点的指定服务请求对应的占用带宽。假设资源的目标水位为200G/s,当分配给网络节点的指定服务请求对应的占用带宽与目标水位相同,也是200G/s时,网络节点的带宽使用量为目标水位,即200G/s。当资源水位为带宽使用率时,可以先换算成带宽使用量。例如,网络节点的总带宽为250G/s,当目标水位为80%时,网络节点的目标带宽使用量为200G/s。当分配给网络节点的指定服务请求对应的占用带宽与网络节点的目标带宽使用量相同,也是200G/s时,网络节点的带宽使用率为目标水位,即80%。
当资源水位为CPU使用率时,由于CPU使用率与分配给网络节点的指定服务请求对应的占用带宽相关,因此可以根据经验确定当CPU使用率为目标CPU使用率时,分配给网络节点的指定服务请求对应的占用带宽的目标数值。当分配给网络节点的指定服务请求对应的占用带宽与分配给网络节点的指定服务请求对应的占用带宽的目标数值相同时,网络节点的CPU使用率为目标CPU使用率。
根据本公开的实施例,所述控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,包括:控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
根据本公开的实施例,服务请求方(例如,用户的客户端或CDN节点)通过访问指定域名来请求指定服务,服务请求方向DNS发送的指定服务请求中包含所述指定域名。DNS根据流量调度系统指示的比例,将指定域名解析为不同的网络地址(每个网络地址对应一个相应的网络节点),从而将指定服务请求调度到不同的网络节点。这样,可以通过控制DNS将指定域名解析为不同网络地址的比例,来控制指定服务请求对应的占用带宽中分配给不同网络节点的比例,进而控制与分配给所述网络节点的所述指定服务请求对应的占用带宽。在CDN场景下,当服务请求方是用户的客户端时,所述网络节点是指CDN边缘节点,当服务请求方是CDN节点时,所述网络节点是指为所述CDN节点提供中继服务的节点,例如,当服务请求方是CDN边缘节点时,所述网络节点是CDN的第二层节点,当服务请求方是CDN第二层节点时,所述网络节点是CDN的第三层节点……以此类推。
例如,在CDN场景下,假设指定服务请求中包含的指定域名是www.aaa.com/video001,有三个CDN节点用于提供该指定域名的相应服务,DNS可以按照流量调度系统指示的1:2:3的比例在这三个CDN节点中分配指定服务请求对应的占用带宽,即,对于该指定服务请求,CDN节点1处理1/6的占用带宽对应的指定服务请求,CDN节点2处理2/6的占用带宽对应的指定服务请求,CDN节点3处理3/6的占用带宽对应的指定服务请求。假设指定服务请求对应的占用带宽总共为600G/s时,CDN节点1处理100G/s的占用带宽对应的指定服务请求,CDN节点2处理200G/s的占用带宽对应的指定服务请求,CDN节点3处理300G/s的占用带宽对应的指定服务请求。图2示出根据本公开实施例的网络节点的资源水位控制方法的原理示意图。
如图2所示,流量调度系统可以包括传感器模块和控制器模块,传感器模块根据网络系统日志对网络节点的资源水位进行采集,获取网络节点的用于处理指定服务请求的资源的实际水位。网络节点的目标水位可以是根据经验确定的在保证服务质量的同时不至于导致资源过度闲置而引起成本浪费的资源水位。传感器模块和控制器模块可以由一个或多个服务器实现。
控制器模块根据资源的目标水位和实际水位,对分配给网络节点的所述指定服务请求对应的占用带宽进行反馈控制。例如,当实际水位高于目标水位时,减少分配给网络节点的指定服务请求对应的占用带宽,当实际水位低于目标水位时,增加分配给网络节点的指定服务请求对应的占用带宽。这样,通过实时获取网络节点的资源的实际水位,可以对分配给网络节点的指定服务请求对应的占用带宽进行动态调节,使得网络节点的资源的实际水位尽可能接近目标水位,在保证服务质量的同时不至于导致资源过度闲置而引起成本浪费。
根据本公开的实施例,所述控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,包括:根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,根据所述目标占用带宽对与分配给所述网络节点的所述指定服务请求对应的占用带宽进行控制。其中,流量调度系统根据目标占用带宽确定DNS的解析策略,解析策略为使得分配给网络节点的与指定服务请求相对应的占用带宽等于目标流量。例如,假设当前与指定服务请求相对应的占用带宽为600G/s,与分配给所述网络节点的所述指定服务请求对应的目标占用带宽为200G/s,则解析策略为将与200G/s占用带宽相对应的指定服务请求解析为由所述网络节点提供服务。
根据本公开的实施例,所述控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,包括:根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。在上面的示例中,假设当前与指定服务请求相对应的占用带宽为600G/s,与分配给所述网络节点的所述指定服务请求对应的目标占用带宽为200G/s,则所述指定服务请求对应的占用带宽中分配给所述网络节点的比例为1/3。在确定该比例之后,DNS可以根据该比例对接收到的指定服务请求进行解析,即,将与1/3的占用带宽相对应的指定服务请求解析为由所述网络节点提供服务。
为了更加精确和有效率地对分配给网络节点的所述指定服务请求对应的占用带宽进行反馈控制,根据本公开的实施例,所述根据所述资源的目标水位和实际水位,控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,包括:根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,控制与分配给所述网络节点的所述指定服务请求对应的占用带宽。例如,可以根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,根据所述目标占用带宽对与分配给所述网络节点的所述指定服务请求对应的占用带宽进行控制。
比例积分微分PID控制算法和比例微分PD控制算法是常用的控制算法,P、I、D分别为比例(Proportion)、积分(Integral)、微分(Differential)的简写,由于其算法简单、鲁棒性好和可靠性高,被广泛应用于工业控制。PID控制算法的原理是将被控对象的目标值与实际值之间的偏差按比例、积分和微分通过线性组合构成控制量,对被控对象进行控制。PD控制算法的原理是将被控对象的实际值与目标值之间的偏差按比例和微分通过线性组合构成控制量,对被控对象进行控制。
具体地,PID算法公式为:
其中,Kp为比例增益,Tt为积分时间常数,TD为微分时间常数,u(t)为PID控制算法输出的控制量,e(t)为目标值与实际值之差。
PD算法公式为:
其中,Kp为比例增益,TD为微分时间常数,u为PD控制算法输出的控制量,e(t)为目标值与实际值之差。
在本公开的实施例中,e(t)为资源的目标水位对应的占用带宽与实际水位对应的占用带宽之差,当资源水位为带宽使用量时,目标水位为带宽的目标使用量,实际水位为带宽的实际使用量。当资源水位为带宽使用率时,可以相应地换算为带宽使用量进行计算。资源水位为CPU使用率时,可以将CPU的目标使用率和实际使用率根据经验公式换算为对应的占用带宽。
u(t)和u分别为根据PID控制算法和PD控制算法得到的控制量,将该控制量与分配给所述网络节点的所述指定服务请求对应的当前目标占用带宽相加,以动态更新与分配给所述网络节点的所述指定服务请求对应的当前目标占用带宽。
根据本公开的实施例,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法控制与分配给所述网络节点的所述指定服务请求对应的占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法控制与分配给所述网络节点的所述指定服务请求对应的占用带宽。
根据本公开的实施例,可以根据实际网络情况和服务性能要求,选择通过比例积分微分PID控制算法、或通过比例微分PD控制算法、或通过比例积分微分PID控制算法和比例微分PD控制算法的组合来控制与分配给所述网络节点的所述指定服务请求对应的占用带宽。
由于资源的实际水位高于目标水位对系统性能影响巨大,因此此时使用PID控制算法,兼顾PD控制算法的快速性,结合I控制算法的静态差特点,达到比较高的调节质量,当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法控制与分配给所述网络节点的所述指定服务请求对应的占用带宽,能够实现对占用带宽的快速强化调节,虽然可能具有一定的静态误差,但由于资源的实际水位低于目标水位对系统性能影响较小,因此一定量的静态误差是可以容忍的。根据本公开的实施例,当所述资源的实际水位低于目标水位时,也可以使用PID控制算法对与分配给所述网络节点的所述指定服务请求对应的占用带宽进行调节。
除了PID与PD算法之外,也可以根据要提供的服务和网络的实际情况,灵活选择其他反馈控制算法,例如比例积分PI控制算法、I控制算法等。
根据本公开的实施例,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
根据本公开的实施例,对于带宽资源和CPU资源,或者对于用于不同服务(例如直播、点播等)的资源,可以为控制算法设置不同的参数,以适应不同应用场景的需要。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
根据本公开的实施例,预设规则为基于网络运营商、用户所在地区、服务提供平台中的一个多个维度,将指定服务请求对应的占用带宽划分为多个流量单元,例如,中国电信-北京-视频网站A,中国移动-上海-视频网站A,中国联通-杭州-直播网站B,等等。假设指定服务请求对应的占用带宽为600G/s,划分为3个流量单元,即流量单元1、流量单元2、流量单元3,与分配给所述网络节点的所述指定服务请求对应的目标占用带宽为200G/s,则确定流量单元1、2、3中分配给所述网络节点的比例均为1/3。需要注意的是,流量单元1、2、3中分配给所述网络节点的比例也可以是其他比例,只要满足流量单元1、2、3中分配给所述网络节点的占用带宽之和为200G/s即可。DNS根据所述流量单元中分配给所述网络节点的目标比例,相应地解析与各流量单元相对应的指定服务请求。
由于DNS在解析过程中可能受到各种网络因素的干扰,导致流量单元中分配给所述网络节点的目标比例常常与目标比例不同。为解决该问题,传感器模块从网络系统日志获取流量单元中分配给所述网络节点的实际比例,根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的流量,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。具体地,如图2所示,控制器模块通过边缘302纠偏,例如通过302重定向的方式,调整分配给网络节点的指定服务请求,以使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。当所述流量单元中分配给所述网络节点的实际比例高于所述流量单元分配给所述网络节点的目标比例时,通过302重定向将分配给所述网络节点的指定服务请求调往其他网络节点,当所述流量单元中分配给所述网络节点的实际比例低于所述流量单元分配给所述网络节点的目标比例时,通过302重定向将分配给其他网络节点的指定服务请求调往所述网络节点。以此方式,可以确保在流量单元的维度上,流量分配的实际比例尽可能接近目标比例,从而确保分配给所述网络节点的指定服务请求对应的占用带宽尽可能接近目标占用带宽。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
如图2所示,控制器模块根据所述流量单元中分配给所述网络节点的实际比例,确定分配给所述网络节点的所述指定服务请求对应的占用带宽,如果该占用带宽小于目标占用带宽,则增加至少一个所述流量单元中分配给所述网络节点的目标比例,如果该占用带宽大于目标占用带宽,则减小至少一个所述流量单元中分配给所述网络节点的目标比例。以此方式,可以整体上确保分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
根据本公开的实施例,可以基于从流量调度系统向DNS发送解析策略指示到DNS开始应用该解析策略之间的时间以及占用带宽变化情况,根据经验确定传感器采集资源水位和流量分配比例的频率以及调整解析策略的频率,以实现优化的占用带宽控制效果。
图3A示出根据本公开实施例的CDN节点的资源水位控制装置的结构框图。
根据本公开的实施例,资源水位控制装置310可以在CDN网络的调度系统的一个或多个服务器上实现,即,资源水位控制装置310中的模块可以在一个服务器上实现,也可以分布在不同服务器上。
如图3A所示,资源水位控制装置310包括第一获取模块311、第一确定模块312和第一控制模块313。
第一获取模块311被配置为获取CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第一确定模块312被配置为根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽。
第一控制模块313被配置为根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
图3B示出根据本公开实施例的网络节点的资源水位控制装置的结构框图。
根据本公开的实施例,资源水位控制装置320可以在网络的调度系统的一个或多个服务器上实现,即,资源水位控制装置320中的模块可以在一个服务器上实现,也可以分布在不同服务器上。
如图3B所示,资源水位控制装置320包括第二获取模块321、第二确定模块322和第而控制模块323。
第二获取模块321被配置为获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第二确定模块322被配置为根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
第二控制模块323被配置为根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
根据本公开的实施例,所述根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
根据本公开的实施例,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
根据本公开的实施例,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
图4示出根据本公开实施例的电子设备的结构框图,所述电子设备可以是网络调度系统中的服务器,用于实现根据本公开实施例的网络节点的资源水位控制方法。
如图4所示,所述电子设备400包括处理器401和存储器402,其中,存储器402用于存储一条或多条设备指令,其中,所述一条或多条设备指令被所述处理器401执行以实现以下步骤:
一种内容分发网络CDN节点的资源水位控制方法,包括:
获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽;
根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
一种网络节点的资源水位控制方法,包括:
获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
根据本公开的实施例,所述根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
根据本公开的实施例,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
根据本公开的实施例,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
根据本公开的实施例,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
图5示出适于用来实现根据本公开实施例的方法的设备系统的结构示意图。
如图5所示,设备系统500包括处理单元501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行上述实施例中的各种处理。在RAM503中,还存储有系统500操作所需的各种程序和数据。处理单元501、ROM502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
以下部件连接至I/O接口505:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的设备程序根据需要被安装入存储部分508。其中,所述处理单元501可实现为CPU、GPU、TPU、FPGA、NPU等处理单元。
特别地,根据本公开的实施例,上文描述的方法可以被实现为设备软件程序。例如,本公开的实施例包括一种设备程序产品,其包括设备指令,该设备指令被处理器执行时实现上文所述的方法步骤。在这样的实施例中,该设备程序产品可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和设备程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与设备指令的组合来实现。
描述于本公开实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过可编程硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定。
作为另一方面,本公开还提供了一种设备可读存储介质,该设备可读存储介质可以是上述实施例中电子设备或设备系统中所包含的设备可读存储介质;也可以是单独存在,未装配入设备中的设备可读存储介质。设备可读存储介质存储有一个或者一个以上程序,所述程序被一个或者一个以上的处理器用来执行描述于本公开的方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (11)
1.一种内容分发网络CDN节点的资源水位控制方法,包括:
获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,其中所述指定服务请求对应的目标占用带宽,指所述CDN节点处理指定服务请求时用于流量发送和/或接收的占用带宽;
根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述CDN节点的比例。
2.一种网络节点的资源水位控制方法,包括:
获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,其中所述指定服务请求对应的目标占用带宽,指所述网络节点处理指定服务请求时用于流量发送和/或接收的占用带宽;
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
3.根据权利要求2所述的方法,其中,所述根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
4.根据权利要求3所述的方法,其中,所述根据所述资源的目标水位和实际水位,使用比例积分微分PID控制算法和/或比例微分PD控制算法,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,包括:
当所述资源的实际水位高于目标水位时,使用比例积分微分PID控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽;
当所述资源的实际水位低于目标水位时,使用比例微分PD控制算法确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
5.根据权利要求3所述的方法,其中,针对不同类型的资源,为所述比例积分微分PID控制算法和/或比例微分PD控制算法设置不同的参数。
6.根据权利要求2所述的方法,其中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的目标比例和实际比例,调节所述流量单元中分配给所述网络节点的占用带宽,使得所述流量单元中分配给所述网络节点的实际比例接近所述流量单元分配给所述网络节点的目标比例。
7.根据权利要求2所述的方法,其中,所述指定服务请求对应的占用带宽包括根据预设规则划分的多个流量单元,所述根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例,包括:
根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,确定所述流量单元中分配给所述网络节点的目标比例;
通过所述域名服务器按照所述目标比例向所述网络节点分配所述指定服务请求;
获取所述流量单元中分配给所述网络节点的实际比例;
根据所述流量单元中分配给所述网络节点的实际比例和与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,调节至少一个所述流量单元中分配给所述网络节点的目标比例,使得与分配给所述网络节点的所述指定服务请求对应的占用带宽接近与分配给所述网络节点的所述指定服务请求对应的目标占用带宽。
8.一种内容分发网络CDN节点的资源水位控制装置,包括:
第一获取模块,被配置为获取所述CDN节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第一确定模块,被配置为根据所述资源的目标水位和实际水位,确定与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,其中所述指定服务请求对应的目标占用带宽,指所述CDN节点处理指定服务请求时用于流量发送和/或接收的占用带宽;
第一控制模块,被配置为根据与分配给所述CDN节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述CDN节点的比例。
9.一种网络节点的资源水位控制装置,包括:
第二获取模块,被配置为获取网络节点用于处理指定服务请求的资源的目标水位和实际水位,所述资源的水位表示所述资源的使用量或使用率;
第二确定模块,被配置为根据所述资源的目标水位和实际水位,确定与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,其中所述指定服务请求对应的目标占用带宽,指所述网络节点处理指定服务请求时用于流量发送和/或接收的占用带宽;
第二控制模块,被配置为根据与分配给所述网络节点的所述指定服务请求对应的目标占用带宽,通过域名服务器控制所述指定服务请求对应的占用带宽中分配给所述网络节点的比例。
10.一种电子设备,包括存储器和处理器;其中,所述存储器用于存储一条或多条设备指令,其中,所述一条或多条设备指令被所述处理器执行以实现权利要求1-7任一项所述的方法步骤。
11.一种可读存储介质,其上存储有设备指令,该设备指令被处理器执行时实现权利要求1-7任一项所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111404584.5A CN114338705B (zh) | 2021-11-24 | 2021-11-24 | 内容分发网络cdn节点的资源水位控制方法、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111404584.5A CN114338705B (zh) | 2021-11-24 | 2021-11-24 | 内容分发网络cdn节点的资源水位控制方法、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114338705A CN114338705A (zh) | 2022-04-12 |
CN114338705B true CN114338705B (zh) | 2023-12-01 |
Family
ID=81047459
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111404584.5A Active CN114338705B (zh) | 2021-11-24 | 2021-11-24 | 内容分发网络cdn节点的资源水位控制方法、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114338705B (zh) |
Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102523231A (zh) * | 2011-12-27 | 2012-06-27 | 北京蓝汛通信技术有限责任公司 | 一种基于dns解析的流量调度方法、装置及服务器 |
CN104363313A (zh) * | 2014-12-02 | 2015-02-18 | 网宿科技股份有限公司 | 使用内容分发网络的网站的资源使用率保障方法和系统 |
CN104954286A (zh) * | 2015-05-29 | 2015-09-30 | 小米科技有限责任公司 | 带宽分配的方法及装置 |
CN106033345A (zh) * | 2015-03-17 | 2016-10-19 | 阿里巴巴集团控股有限公司 | Cpu使用率的控制方法和装置 |
CN106470167A (zh) * | 2015-08-17 | 2017-03-01 | 阿里巴巴集团控股有限公司 | 网络传输速度的控制方法和装置 |
CN107171839A (zh) * | 2017-05-19 | 2017-09-15 | 上海幻电信息科技有限公司 | 一种带宽流量成本控制方法 |
CN107395554A (zh) * | 2016-05-17 | 2017-11-24 | 阿里巴巴集团控股有限公司 | 流量攻击的防御处理方法及装置 |
CN108696562A (zh) * | 2017-04-12 | 2018-10-23 | 贵州白山云科技有限公司 | 一种获取网站资源的方法及装置 |
CN109120424A (zh) * | 2017-06-23 | 2019-01-01 | 贵州白山云科技股份有限公司 | 一种带宽调度方法及装置 |
CN109787921A (zh) * | 2019-03-19 | 2019-05-21 | 网宿科技股份有限公司 | Cdn带宽调度方法、采集及调度服务器和存储介质 |
CN110213620A (zh) * | 2018-02-28 | 2019-09-06 | 优酷网络技术(北京)有限公司 | 带宽分配方法及装置 |
CN110581801A (zh) * | 2018-06-08 | 2019-12-17 | 阿里巴巴集团控股有限公司 | 内容分发网络的网络调整方法以及装置 |
WO2020206784A1 (zh) * | 2019-04-12 | 2020-10-15 | 网宿科技股份有限公司 | 一种域名带宽调整方法及装置 |
CN112165691A (zh) * | 2020-09-24 | 2021-01-01 | 百度在线网络技术(北京)有限公司 | 内容分发网络调度方法、装置、服务器和介质 |
CN112328947A (zh) * | 2020-12-31 | 2021-02-05 | 腾讯科技(深圳)有限公司 | 待推荐媒体信息的分配方法、装置及存储介质 |
CN112866985A (zh) * | 2021-02-20 | 2021-05-28 | 百度在线网络技术(北京)有限公司 | 流量控制方法、资源下载方法、装置、设备和存储介质 |
CN113301445A (zh) * | 2020-06-16 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 一种内容分发网络的地址分配方法和装置 |
CN113467910A (zh) * | 2021-06-30 | 2021-10-01 | 乐视云计算有限公司 | 基于业务等级的过载保护调度方法 |
CN113497817A (zh) * | 2020-03-20 | 2021-10-12 | 北京金山云网络技术有限公司 | 流量调度方法、装置、cdn网络的边缘节点及服务器 |
CN113691463A (zh) * | 2021-08-19 | 2021-11-23 | 网宿科技股份有限公司 | Cdn调度参数调整方法、装置、电子设备及存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7260062B2 (en) * | 2002-12-20 | 2007-08-21 | International Business Machines Corporation | Flow control in network devices |
US8549570B2 (en) * | 2012-02-23 | 2013-10-01 | Ericsson Television Inc. | Methods and apparatus for managing network resources used by multimedia streams in a virtual pipe |
JP6428231B2 (ja) * | 2014-12-15 | 2018-11-28 | 富士通株式会社 | ストレージ管理装置、性能調整方法及び性能調整プログラム |
CN105898383A (zh) * | 2015-11-26 | 2016-08-24 | 乐视云计算有限公司 | 带宽分配方法及系统 |
CN108306971B (zh) * | 2018-02-02 | 2020-06-23 | 网宿科技股份有限公司 | 一种发送数据资源的获取请求的方法和系统 |
CN110198344A (zh) * | 2019-05-05 | 2019-09-03 | 网宿科技股份有限公司 | 一种资源调度方法及系统 |
-
2021
- 2021-11-24 CN CN202111404584.5A patent/CN114338705B/zh active Active
Patent Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102523231A (zh) * | 2011-12-27 | 2012-06-27 | 北京蓝汛通信技术有限责任公司 | 一种基于dns解析的流量调度方法、装置及服务器 |
CN104363313A (zh) * | 2014-12-02 | 2015-02-18 | 网宿科技股份有限公司 | 使用内容分发网络的网站的资源使用率保障方法和系统 |
CN106033345A (zh) * | 2015-03-17 | 2016-10-19 | 阿里巴巴集团控股有限公司 | Cpu使用率的控制方法和装置 |
CN104954286A (zh) * | 2015-05-29 | 2015-09-30 | 小米科技有限责任公司 | 带宽分配的方法及装置 |
CN106470167A (zh) * | 2015-08-17 | 2017-03-01 | 阿里巴巴集团控股有限公司 | 网络传输速度的控制方法和装置 |
CN107395554A (zh) * | 2016-05-17 | 2017-11-24 | 阿里巴巴集团控股有限公司 | 流量攻击的防御处理方法及装置 |
CN108696562A (zh) * | 2017-04-12 | 2018-10-23 | 贵州白山云科技有限公司 | 一种获取网站资源的方法及装置 |
CN107171839A (zh) * | 2017-05-19 | 2017-09-15 | 上海幻电信息科技有限公司 | 一种带宽流量成本控制方法 |
CN109120424A (zh) * | 2017-06-23 | 2019-01-01 | 贵州白山云科技股份有限公司 | 一种带宽调度方法及装置 |
CN110213620A (zh) * | 2018-02-28 | 2019-09-06 | 优酷网络技术(北京)有限公司 | 带宽分配方法及装置 |
CN110581801A (zh) * | 2018-06-08 | 2019-12-17 | 阿里巴巴集团控股有限公司 | 内容分发网络的网络调整方法以及装置 |
CN109787921A (zh) * | 2019-03-19 | 2019-05-21 | 网宿科技股份有限公司 | Cdn带宽调度方法、采集及调度服务器和存储介质 |
WO2020206784A1 (zh) * | 2019-04-12 | 2020-10-15 | 网宿科技股份有限公司 | 一种域名带宽调整方法及装置 |
CN113497817A (zh) * | 2020-03-20 | 2021-10-12 | 北京金山云网络技术有限公司 | 流量调度方法、装置、cdn网络的边缘节点及服务器 |
CN113301445A (zh) * | 2020-06-16 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 一种内容分发网络的地址分配方法和装置 |
CN112165691A (zh) * | 2020-09-24 | 2021-01-01 | 百度在线网络技术(北京)有限公司 | 内容分发网络调度方法、装置、服务器和介质 |
CN112328947A (zh) * | 2020-12-31 | 2021-02-05 | 腾讯科技(深圳)有限公司 | 待推荐媒体信息的分配方法、装置及存储介质 |
CN112866985A (zh) * | 2021-02-20 | 2021-05-28 | 百度在线网络技术(北京)有限公司 | 流量控制方法、资源下载方法、装置、设备和存储介质 |
CN113467910A (zh) * | 2021-06-30 | 2021-10-01 | 乐视云计算有限公司 | 基于业务等级的过载保护调度方法 |
CN113691463A (zh) * | 2021-08-19 | 2021-11-23 | 网宿科技股份有限公司 | Cdn调度参数调整方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114338705A (zh) | 2022-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020228469A1 (zh) | 一种移动边缘计算节点的选择方法、装置及系统 | |
US20190182340A1 (en) | Selecting a content providing server in a content delivery network | |
US7400633B2 (en) | Adaptive bandwidth throttling for network services | |
US6570847B1 (en) | Method and system for network traffic rate control based on fractional tokens | |
US9116752B1 (en) | Systems, methods, devices and arrangements for server load distribution | |
CN110138756B (zh) | 一种限流方法及系统 | |
US20050088976A1 (en) | Methods, apparatus and computer programs for managing performance and resource utilization within cluster-based systems | |
EP0817444A2 (en) | System for context-dependent name resolution | |
EP2976887A1 (en) | Bandwidth management for over-the-top adaptive streaming | |
EP3547625B1 (en) | Method and system for sending request for acquiring data resource | |
CN114338705B (zh) | 内容分发网络cdn节点的资源水位控制方法、设备及介质 | |
CN110933128B (zh) | 节点流量调度方法、装置、电子设备及存储介质 | |
EP2874368A1 (en) | Method and device for generating aggregate layer networkmap and aggregate layer costmap | |
WO2020134753A1 (zh) | 请求消息处理方法、装置及系统、服务器、存储介质 | |
US10154414B2 (en) | Resource allocation | |
US11627358B2 (en) | Communication entity and a method for transmitting a video data stream | |
WO2004063840A2 (en) | Content delivery system | |
JP2009163440A (ja) | 負荷分散方法、負荷分散システム、負荷分散サーバ及び負荷分散プログラム | |
CN113381939B (zh) | 数据传输方法、装置、电子设备及计算机可读存储介质 | |
US20100057914A1 (en) | Method, apparatus and system for scheduling contents | |
CN116155829A (zh) | 网络流量处理方法、装置、介质及电子设备 | |
CN113301445B (zh) | 一种内容分发网络的地址分配方法和装置 | |
US8650293B2 (en) | Threshold-based normalized rate earliest delivery first (NREDF) for delayed down-loading services | |
WO1997045792A1 (en) | Apparatus and method for preventing network server overload | |
CN117695617A (zh) | 云游戏数据的优化处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |