CN114448893A - 一种cdn节点任务下发的聚合方法、装置及计算机设备 - Google Patents

一种cdn节点任务下发的聚合方法、装置及计算机设备 Download PDF

Info

Publication number
CN114448893A
CN114448893A CN202111602649.7A CN202111602649A CN114448893A CN 114448893 A CN114448893 A CN 114448893A CN 202111602649 A CN202111602649 A CN 202111602649A CN 114448893 A CN114448893 A CN 114448893A
Authority
CN
China
Prior art keywords
aggregated
tasks
task
grouping
cdn node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111602649.7A
Other languages
English (en)
Inventor
孙伟
苏平宇
于龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianyi Cloud Technology Co Ltd
Original Assignee
Tianyi Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianyi Cloud Technology Co Ltd filed Critical Tianyi Cloud Technology Co Ltd
Priority to CN202111602649.7A priority Critical patent/CN114448893A/zh
Publication of CN114448893A publication Critical patent/CN114448893A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/41Flow control; Congestion control by acting on aggregated flows or links

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开一种CDN节点任务下发的聚合方法、装置及计算机设备,其中,方法,包括:获取至少一条待聚合任务及待聚合任务的全部数量;按照预设分组规则和待聚合任务的全部数量分组待聚合任务;基于分组结果成组聚合待聚合任务。本发明可以显著提升待聚合任务的下发效率,无需逐条逐次下发大量的CDN节点任务,避免重复下发包含相同元素的数据,进而有利于减少网络资源浪费,避免经济损失,也提升了CDN节点任务处理能力。并且,在节点任务下发高峰期间,无需担心CDN节点的运行速度,能够有效避免任务数据丢失及任务数据超时的现象,进而满足了客户需求及增强了客户体验。

Description

一种CDN节点任务下发的聚合方法、装置及计算机设备
技术领域
本发明涉及CDN(Content Delivery Network)节点任务下发技术领域, 具体涉及一种CDN节点任务下发的聚合方法、装置及计算机设备。
背景技术
CDN即内容分发网络,通过在网络各处放置节点服务器在互联网基础 上构成一层智能虚拟网络,其能够实时地根据网络流量和各节点的连接、 负载状况以及到用户的距离和响应时间等综合信息将用户的请求重新导向 离用户最近的服务节点上,其目的是使用户可就近取得所需内容,解决 Internet网络拥挤的状况,提高用户访问网站的响应速度。
相关技术中,一般通过逐条依次下发CDN节点任务,在较少用户数量 的情况下,该方式尚可适用,但是随着CDN节点服务的发展,用户数量以 及用户需求不断增长,刷新节点任务的下发量也不断增长,若按照逐条依 次下发CDN节点任务,往往需要数次处理每条任务包含相同元素的数据, 显然,不但增加网络资源的开销,而且,在节点任务下发高峰期间,会影 响CDN节点的运行速度,并且容易导致任务数据丢失及任务数据超时的现 象,无法满足客户需求及无法增强客户体验。
发明内容
因此,本发明要解决的技术问题在于克服现有技术中不但增加网络资 源的开销,而且,在节点任务下发高峰期间,会影响CDN节点的运行速度, 并且容易导致任务数据丢失及任务数据超时的现象,无法满足客户需求及 无法增强客户体验的问题,从而提供一种CDN节点任务下发的聚合方法、 装置及计算机设备。
根据第一方面,本发明实施例提供一种CDN节点任务下发的聚合方法, 包括如下步骤:
获取至少一条待聚合任务及所述待聚合任务的全部数量;
按照预设分组规则和所述待聚合任务的全部数量分组所述待聚合任务;
基于分组结果成组聚合所述待聚合任务。
在一种实施方式中,所述的CDN节点任务下发的聚合方法,还包括:
获取各组待聚合任务对应的各目标IP网络;
基于所述各目标IP网络,下发各组待聚合任务至目标任务队列;
等待代理节点按照预设数值从所述目标任务队列中拉取各组待聚合任 务。
在一种实施方式中,按照预设分组规则和所述待聚合任务的全部数量 分组所述待聚合任务,包括:
获取每条待聚合任务的域名或所属任务资源库;
按照具有相同域名或所属相同任务资源库,对所述全部数量的所述待 聚合任务进行分类;
获取各类所述待聚合任务的当前数量;
基于预设聚合参数和各类所述待聚合任务的当前数量,计算所述待聚 合任务的全部数量分组结果,所述预设聚合参数为各组包含所述待聚合任 务的聚合数量。
在一种实施方式中,计算所述待聚合任务的全部数量分组结果通过如 下方式计算:
计算各类所述待聚合任务的当前数量与所述预设聚合参数的商值;
将所述商值作为所述分组结果。
在一种实施方式中,若所述商值包含有整数和余数,其中,所述余数 作为分组后剩余所述待聚合任务的当前数量,将所述整数作为所述分组结 果后,再将分组后剩余的所述待聚合任务聚合成组。
在一种实施方式中,所述的CDN节点任务下发的聚合方法,在成组聚 合所述待聚合任务时为各组待聚合任务添加关联聚合参数。
根据第二方面,本发明实施例还提供一种CDN节点任务下发的聚合装 置,包括如下模块:
任务数量获取模块,用于获取至少一条待聚合任务及所述待聚合任务 的数量;
任务分组模块,用于按照预设分组规则和所述待聚合任务的数量分组 所述待聚合任务
任务聚合模块,用于基于分组结果成组聚合所述待聚合任务。
在一种实施方式中,所述的CDN节点任务下发的聚合装置,还包括:
网络获取模块,用于获取各组待聚合任务对应的各目标IP网络;
任务下发模块,用于基于所述各目标IP网络,下发各组待聚合任务至 目标任务队列;
任务等待模块,用于等待代理节点按照预设数值从所述目标任务队列 中拉取各组待聚合任务。
根据第三方面,本发明实施例还提供一种计算机可读存储介质,所述 计算机可读存储介质存储有计算机指令,所述计算机指令用于使所述计算 机执行第一方面或第一方面任一实施方式中所述的CDN节点任务下发的聚 合方法。
根据第四方面,本发明实施例还提供一种计算机设备,包括:存储器 和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存 储有计算机指令,所述处理器通过执行所述计算机指令,从而执行第一方 面或第一方面任一实施方式中所述的CDN节点任务下发的聚合方法。
本发明技术方案,具有如下优点:
本发明公开一种CDN节点任务下发的聚合方法、装置及计算机设备, 其中,方法,包括如下步骤:获取至少一条待聚合任务及所述待聚合任务 的全部数量;按照预设分组规则和所述待聚合任务的全部数量分组所述待 聚合任务;基于分组结果成组聚合所述待聚合任务。本发明可以显著提升 待聚合任务的下发效率,无需逐条逐次下发大量的CDN节点任务,避免重 复下发包含相同元素的数据,进而有利于减少网络资源浪费,避免经济损失,也提升了CDN节点任务处理能力。并且,在节点任务下发高峰期间, 无需担心CDN节点的运行速度,能够有效避免任务数据丢失及任务数据超 时的现象,进而满足了客户需求及增强了客户体验。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下 面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍, 显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普 通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获 得其他的附图。
图1为本发明实施例中CDN节点任务下发的聚合方法的一个具体示 例的流程图;
图2为本发明实施例中CDN节点任务下发的聚合方法的另一个具体 示例的流程图;
图3为本发明实施例中CDN节点任务下发的聚合方法的另一个具体 示例的流程图;
图4为本发明实施例中CDN节点任务下发的聚合方法的一示例示意 图;
图5为本发明实施例中CDN节点任务下发的聚合装置的一个结构框 图;
图6为本发明实施例中计算机设备的硬件示意图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然, 所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发 明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得 的所有其他实施例,都属于本发明保护的范围。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、 “右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所 示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示 或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作, 因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用 于描述目的,而不能理解为指示或暗示相对重要性。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术 语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以 是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以 是直接相连,也可以通过中间媒介间接相连,还可以是两个元件内部的连 通,可以是无线连接,也可以是有线连接。对于本领域的普通技术人员而 言,可以具体情况理解上述术语在本发明中的具体含义。
此外,下面所描述的本发明不同实施方式中所涉及的技术特征只要彼 此之间未构成冲突就可以相互结合。
本发明公开一种CDN节点任务下发的聚合方法,如图1所示,包括如 下步骤:
步骤S11:获取至少一条待聚合任务及待聚合任务的全部数量。
此处的CDN节点为用来缓存数据的服务器,网站加入CDN服务后, 都会涉及多个CDN节点,当用户访问网站时,请求会指向距离最近的CDN 节点,以此来提升访问速度,CDN节点距离用户的距离越近,响应速度越 快。
其中,待聚合任务为即将需要聚合的CDN节点任务,该CDN节点任 务经过校验后得到。其中待聚合任务的全部数量可以至少为一条,也可以 为多条。正常情况下,一般CDN节点任务的全部数量是成千上百条。例如: 将待聚合任务的全部数量用q表示,q可以为1000或100或1105等任何数 量,q为正整数。
步骤S12:按照预设分组规则和待聚合任务的全部数量分组待聚合任务。
步骤S13:基于分组结果成组聚合待聚合任务。
在一种实施方式中,如图2所示,上述步骤S12,按照预设分组规则和 待聚合任务的全部数量分组待聚合任务,包括:
步骤S21:获取每条待聚合任务的域名或所属任务资源库。
例如:存在A、B、C、D四个任务资源库,每条待聚合任务的域名包 括0012top,0013xyz,0015cn,0016edu。
步骤S22:按照具有相同域名或所属相同任务资源库,对全部数量的待 聚合任务进行分类;
例如:全部数量的待聚合任务q=110条,任务资源库的类型分别为A、 B、C。其中,属于A任务资源库为40条,属于B任务资源库的待聚合任 务为50条,属于C任务资源库的待聚合任务为20条。或,例如:全部数 量的待聚合任务q=85,域名类型分别为0013xyz、0016edu。其中,属于 0013xyz域名的待聚合任务为50条,属于0016edu域名的待聚合任务为35 条。
步骤S23:获取各类待聚合任务的当前数量。
此处,各类待聚合任务的当前数量可以用p表示,p为正整数。例如: 全部数量的待聚合任务q=110条,任务资源库的类型分别为A、B、C。其 中,属于A任务资源库为35条,属于B任务资源库的待聚合任务为50条, 属于C任务资源库的待聚合任务为20条,其中,pA=40,pB=50,pC=20。 或,例如:全部数量的待聚合任务q=85,域名类型分别为0013xyz、0016edu。 其中,属于0013xyz域名的待聚合任务为50条,属于0016edu域名的待聚 合任务为35条,其中,pxyz=50,pedu=35。
步骤S24:基于预设聚合参数和各类待聚合任务的当前数量,计算待聚 合任务的全部数量分组结果,预设聚合参数为各组包含待聚合任务的聚合 数量。
此处,预设聚合参数为各组包含待聚合任务的聚合数量。预设聚合参 数可以用n表示,可以灵活配置该预设聚合参数,例如:可以根据CDN节 点分布数据资源的能力或用户需求量灵活设置各组包含待聚合任务的聚合 数量。若CDN节点分布数据资源的能力较强或用户需求量大,则可以将各 组包含待聚合任务的聚合数量对应的聚合参数配置大一些。反之,若CDN 节点分布数据资源的能力较弱或用户需求量小,则可以将各组包含待聚合 任务的聚合数量对应的聚合参数配置小一些。
在一种实施方式中,计算待聚合任务的全部数量分组结果通过如下方 式计算,包括:
第一步:计算各类待聚合任务的当前数量与预设聚合参数的商值。
第二步:将商值作为分组结果。此处分组结果可以用m表示。
例如:待聚合任务的全部数量q=110。其中,A类任务资源库的当前数 量pA=40,预设聚合参数n=10,m=pA/n=40/10=4,则分组结果为4组。B 类任务资源库的当前数量pB=50,预设聚合参数n=10,m=pB/n=50/10=5, 则分组结果为5组。C类任务资源库的当前数量pC=20,预设聚合参数n=10, m=pC/n=20/10=2,则分组结果为2组。因此,可以按照每4组按照A类任 务资源库一起聚合,每5组按照B类任务资源库一起聚合,每2组按照C 类任务资源库一起聚合,将全部数量110条的待聚合任务就成组聚合完毕。
例如:待聚合任务的全部数量q=1,各类待聚合任务的当前数量p=1, m=p/n=1/1=1,则分组结果为1组。因此,可以按照每1组一起聚合1条的 待聚合任务。当然,这种情况应用还是较少。
在一种实施方式中,若上述商值包含有整数和余数,其中,余数作为 分组后剩余待聚合任务的当前数量,将整数作为分组结果后,再将分组后 剩余的待聚合任务聚合成组。
例如:全部数量的待聚合任务q=85。其中,属于0013xyz域名的待聚 合任务pxyz=50,预设聚合参数n=10,m=pxyz/n=50/10=5,则分组结果为5 组。属于0016edu域名的待聚合任务pedu=35,预设聚合参数n=10, m=pxyz/n=35/10=6……5,其中6为整数,5为余数,则m=6,即分组结果 为6组后,将余数5作为分成6组后剩余的待聚合任务的当前数量,在此 基础上,将剩余的6条待聚合任务按照0016edu域名一起聚合。因此,将 将全部数量85条的待聚合任务就成组聚合完毕。
上述步骤S13相当于将全部数量的待聚合任务按组打包一起,通过整 组的数据包一起聚合相同类型的待聚合数量。
在一种实施方式中,在成组聚合待聚合任务时为各组待聚合任务添加 关联聚合参数。该关联聚合参数为各组待聚合任务的必要聚合参数,可以 作为控制各组待聚合任务执行相应动作的指令参数。
例如:关联聚合参数包括为与目标IP网络相关的IP参数和/或待聚合 任务类型参数和/或CDN节点缓存参数和/或任务请求参数和/或任务上报参 数和/或任务下发的版本参数中的一种或几种
本发明实施例中的CDN节点任务下发的聚合方法,通过成组聚合全部 数量的待聚合任务,每组按照相同类型聚合一起,有利于在下发CDN节点 任务时,避免重复下发包含相同元素的数据,有利于节省数据开销,同时, 显著提升了数据下发效率,也可以提升网络资源的利用率和任务处理能力。
在另一具体实施方式中,如图3所示,本发明实施例中的CDN节点任 务下发的聚合方法,还包括如下步骤:
步骤S14:获取各组待聚合任务对应的各目标IP网络。
例如:m=11,则将11组中每组待聚合任务分配与其对应的各目标IP 网络。
步骤S15:基于各目标IP网络,下发各组待聚合任务至目标任务队列。
此处的目标任务队列可以认为是目标任务流引擎,目标任务队列用于 排列各组待聚合任务,以便代理节点按照先后顺序拉取各组待聚合任务。
步骤S16:等待代理节点按照预设数值从目标任务队列中拉取各组待聚 合任务。
此处的预设数值可以用x表示,该预设数值可以根据用户需求灵活设 置。例如:预设数值x=21,则从目标任务队列中拉取21组待聚合任务,其 中各组包含待聚合任务的聚合数量n=15,代理节点可以一次性拉取的待聚 合任务的总数W=x*n=21*15=315条。
因此,本发明实施例通过执行上述步骤S11-步骤S16,可以显著提升 待聚合任务的下发效率,无需逐条逐次下发大量的CDN节点任务,避免重 复下发包含相同元素的数据,有利于减少网络资源浪费,避免经济损失, 也提升了CDN节点任务处理能力。并且,在节点任务下发高峰期间,无需 担心CDN节点的运行速度,能够有效避免任务数据丢失及任务数据超时的 现象,进而满足了客户需求及增强了客户体验。
如图4所示,为本发明实施例中CDN节点任务下发的聚合的一具体示 例示意图。
基于相同构思,本发明实施例还提供一种CDN节点任务下发的聚合装 置,如图5所示,包括如下模块:
任务数量获取模块51,用于获取至少一条待聚合任务及待聚合任务的 数量。
任务分组模块52,用于按照预设分组规则和待聚合任务的数量分组待 聚合任务。
任务聚合模块53,用于基于分组结果成组聚合待聚合任务。
网络获取模块54,用于获取各组待聚合任务对应的各目标IP网络。
任务下发模块55,用于基于各目标IP网络,下发各组待聚合任务至目 标任务队列。
任务等待模块56,用于等待代理节点按照预设数值从目标任务队列中 拉取各组待聚合任务。
在一种实施方式中,任务分组模块52,包括:
信息获取子模块,用于获取每条待聚合任务的域名或所属任务资源库。
各类当前数量获取子模块,用于获取各类待聚合任务的当前数量。
分组子模块,用于基于预设聚合参数和各类待聚合任务的当前数量, 计算待聚合任务的全部数量分组结果,预设聚合参数为各组包含待聚合任 务的聚合数量。
在一种实施方式中,分组子模块计算待聚合任务的全部数量分组结果 通过如下方式计算:
分组计算子模块,用于计算各类待聚合任务的当前数量与预设聚合参 数的商值。
分组确定子模块,用于将商值作为分组结果。
在一种实施方式中,分组确定子模块中,若商值包含有整数和余数, 其中,余数作为分组后剩余待聚合任务的当前数量,将整数作为分组结果 后,再将分组后剩余的待聚合任务聚合成组。
在一种实施方式中,本发明实施例中的CDN节点任务下发的聚合装置, 在成组聚合待聚合任务时为各组待聚合任务添加关联聚合参数。
基于相同构思,本发明实施例还提供了一种计算机设备,如图6所示, 该计算机设备可以包括处理器61、存储器62,其中处理器61、存储器62 可以通过总线或者其他方式连接,图6中以通过总线连接为例。
处理器61可以为中央处理器(Central Processing Unit,CPU)。处理器 61还可以为其他通用处理器、数字信号处理器(Digital Signal Processor, DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场 可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻 辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片,或者上述各 类芯片的组合。
存储器62作为一种非暂态计算机可读存储介质,可用于存储非暂态软 件程序、非暂态计算机可执行程序以及模块。处理器61通过运行存储在存 储器62中的非暂态软件程序、指令以及模块,从而执行处理器的各种功能 应用以及数据处理,即实现上述实施例中的CDN节点任务下发的聚合方法。
存储器62可以包括存储程序区和存储数据区,其中,存储程序区可存 储操作系统、至少一个功能所需要的应用程序;存储数据区可存储处理器 61所创建的数据等。此外,存储器62可以包括高速随机存取存储器,还可 以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非 暂态固态存储器件。在一些实施例中,存储器62可选包括相对于处理器61 远程设置的存储器,这些远程存储器可以通过网络连接至处理器61。上述 网络的实例包括但不限于电网、互联网、企业内部网、局域网、移动通信 网及其组合。
所述一个或者多个模块存储在所述存储器62中,当被所述处理器61 执行时,执行附图所示实施例中的CDN节点任务下发的聚合方法。
上述计算机设备具体细节可以对应参阅附图所示的实施例中对应的相 关描述和效果进行理解,此处不再赘述。
本领域技术人员可以理解,实现上述实施例方法中的全部或部分流程, 是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一 计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施 例的流程。其中,所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)、随机存储记忆体(Random AccessMemory,RAM)、快 闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态 硬盘(Solid-State Drive,SSD)等;所述存储介质还可以包括上述种类的存 储器的组合。
显然,上述实施例仅仅是为清楚地说明所作的举例,而并非对实施方 式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可 以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予 以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保 护范围之中。

Claims (10)

1.一种CDN节点任务下发的聚合方法,其特征在于,包括如下步骤:
获取至少一条待聚合任务及所述待聚合任务的全部数量;
按照预设分组规则和所述待聚合任务的全部数量分组所述待聚合任务;
基于分组结果成组聚合所述待聚合任务。
2.根据权利要求1所述的CDN节点任务下发的聚合方法,其特征在于,还包括:
获取各组待聚合任务对应的各目标IP网络;
基于所述各目标IP网络,下发各组待聚合任务至目标任务队列;
等待代理节点按照预设数值从所述目标任务队列中拉取各组待聚合任务。
3.根据权利要求1所述的CDN节点任务下发的聚合方法,其特征在于,按照预设分组规则和所述待聚合任务的全部数量分组所述待聚合任务,包括:
获取每条待聚合任务的域名或所属任务资源库;
按照具有相同域名或所属相同任务资源库,对所述全部数量的所述待聚合任务进行分类;
获取各类所述待聚合任务的当前数量;
基于预设聚合参数和各类所述待聚合任务的当前数量,计算所述待聚合任务的全部数量分组结果,所述预设聚合参数为各组包含所述待聚合任务的聚合数量。
4.根据权利要求3所述的CDN节点任务下发的聚合方法,其特征在于,计算所述待聚合任务的全部数量分组结果通过如下方式计算:
计算各类所述待聚合任务的当前数量与所述预设聚合参数的商值;
将所述商值作为所述分组结果。
5.根据权利要求4所述的CDN节点任务下发的聚合方法,其特征在于,若所述商值包含有整数和余数,其中,所述余数作为分组后剩余所述待聚合任务的当前数量,将所述整数作为所述分组结果后,再将分组后剩余的所述待聚合任务聚合成组。
6.根据权利要求1至5中任一项所述的CDN节点任务下发的聚合方法,其特征在于,在成组聚合所述待聚合任务时为各组待聚合任务添加关联聚合参数。
7.一种CDN节点任务下发的聚合装置,其特征在于,包括如下模块:
任务数量获取模块,用于获取至少一条待聚合任务及所述待聚合任务的数量;
任务分组模块,用于按照预设分组规则和所述待聚合任务的数量分组所述待聚合任务
任务聚合模块,用于基于分组结果成组聚合所述待聚合任务。
8.根据权利要求7所述的CDN节点任务下发的聚合装置,其特征在于,还包括:
网络获取模块,用于获取各组待聚合任务对应的各目标IP网络;
任务下发模块,用于基于所述各目标IP网络,下发各组待聚合任务至目标任务队列;
任务等待模块,用于等待代理节点按照预设数值从所述目标任务队列中拉取各组待聚合任务。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使所述计算机执行权利要求1至6中任一项所述的CDN节点任务下发的聚合方法。
10.一种计算机设备,其特征在于,包括:存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行权利要求1至6中任一项所述的CDN节点任务下发的聚合方法。
CN202111602649.7A 2021-12-24 2021-12-24 一种cdn节点任务下发的聚合方法、装置及计算机设备 Pending CN114448893A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111602649.7A CN114448893A (zh) 2021-12-24 2021-12-24 一种cdn节点任务下发的聚合方法、装置及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111602649.7A CN114448893A (zh) 2021-12-24 2021-12-24 一种cdn节点任务下发的聚合方法、装置及计算机设备

Publications (1)

Publication Number Publication Date
CN114448893A true CN114448893A (zh) 2022-05-06

Family

ID=81363051

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111602649.7A Pending CN114448893A (zh) 2021-12-24 2021-12-24 一种cdn节点任务下发的聚合方法、装置及计算机设备

Country Status (1)

Country Link
CN (1) CN114448893A (zh)

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140344399A1 (en) * 2012-12-13 2014-11-20 Level 3 Communications, Llc Origin Server-Side Channel In A Content Delivery Framework
CN104834722A (zh) * 2015-05-12 2015-08-12 网宿科技股份有限公司 基于cdn的内容管理系统
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN105704171A (zh) * 2014-11-25 2016-06-22 北京奇虎科技有限公司 实现cdn访问的系统和方法
CN105847382A (zh) * 2016-04-20 2016-08-10 乐视控股(北京)有限公司 Cdn文件分发方法及系统
CN105897837A (zh) * 2015-12-07 2016-08-24 乐视云计算有限公司 内容分发任务的提交方法及系统
WO2018209734A1 (zh) * 2017-05-15 2018-11-22 网宿科技股份有限公司 一种网络流量动态调度分配方法及系统
CN109976902A (zh) * 2017-12-28 2019-07-05 北京京东尚科信息技术有限公司 任务处理方法、系统、电子设备及计算机可读介质
CN110008257A (zh) * 2019-04-10 2019-07-12 深圳市腾讯计算机系统有限公司 数据处理方法、装置、系统、计算机设备和存储介质
CN110837414A (zh) * 2018-08-15 2020-02-25 北京京东金融科技控股有限公司 任务处理方法和装置
CN110933000A (zh) * 2019-10-25 2020-03-27 北京邮电大学 分布式数据多阶段聚合方法、设备、服务器和存储介质
CN112162839A (zh) * 2020-09-25 2021-01-01 太平金融科技服务(上海)有限公司 任务调度方法、装置、计算机设备和存储介质
CN113760513A (zh) * 2021-09-16 2021-12-07 康键信息技术(深圳)有限公司 一种分布式任务调度方法、装置、设备和介质
CN113780874A (zh) * 2021-09-22 2021-12-10 拉扎斯网络科技(上海)有限公司 信息处理方法和信息处理装置
CN113821506A (zh) * 2020-12-23 2021-12-21 京东科技控股股份有限公司 用于任务系统的任务执行方法、装置、系统、服务器和介质

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140344399A1 (en) * 2012-12-13 2014-11-20 Level 3 Communications, Llc Origin Server-Side Channel In A Content Delivery Framework
CN105704171A (zh) * 2014-11-25 2016-06-22 北京奇虎科技有限公司 实现cdn访问的系统和方法
CN104834722A (zh) * 2015-05-12 2015-08-12 网宿科技股份有限公司 基于cdn的内容管理系统
CN105162878A (zh) * 2015-09-24 2015-12-16 网宿科技股份有限公司 基于分布式存储的文件分发系统及方法
CN105897837A (zh) * 2015-12-07 2016-08-24 乐视云计算有限公司 内容分发任务的提交方法及系统
CN105847382A (zh) * 2016-04-20 2016-08-10 乐视控股(北京)有限公司 Cdn文件分发方法及系统
WO2018209734A1 (zh) * 2017-05-15 2018-11-22 网宿科技股份有限公司 一种网络流量动态调度分配方法及系统
CN109976902A (zh) * 2017-12-28 2019-07-05 北京京东尚科信息技术有限公司 任务处理方法、系统、电子设备及计算机可读介质
CN110837414A (zh) * 2018-08-15 2020-02-25 北京京东金融科技控股有限公司 任务处理方法和装置
CN110008257A (zh) * 2019-04-10 2019-07-12 深圳市腾讯计算机系统有限公司 数据处理方法、装置、系统、计算机设备和存储介质
CN110933000A (zh) * 2019-10-25 2020-03-27 北京邮电大学 分布式数据多阶段聚合方法、设备、服务器和存储介质
CN112162839A (zh) * 2020-09-25 2021-01-01 太平金融科技服务(上海)有限公司 任务调度方法、装置、计算机设备和存储介质
CN113821506A (zh) * 2020-12-23 2021-12-21 京东科技控股股份有限公司 用于任务系统的任务执行方法、装置、系统、服务器和介质
CN113760513A (zh) * 2021-09-16 2021-12-07 康键信息技术(深圳)有限公司 一种分布式任务调度方法、装置、设备和介质
CN113780874A (zh) * 2021-09-22 2021-12-10 拉扎斯网络科技(上海)有限公司 信息处理方法和信息处理装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
H HU: ""Joint content replication and request routing for social video distribution over cloud CDN: A community clustering method"", 《IEEE》, 31 December 2015 (2015-12-31) *
张宇光;: "一种融合不同场景的高并发处理分层架构体系", 通信技术, no. 01, 10 January 2020 (2020-01-10) *
朱昭萌;张功萱;张永平;郭箭;张巍;: "一种基于内容的数据分发网络及算法", 计算机科学, no. 04, 15 April 2013 (2013-04-15) *

Similar Documents

Publication Publication Date Title
CN108776934B (zh) 分布式数据计算方法、装置、计算机设备及可读存储介质
US20160216994A1 (en) Method, system, computer program and computer program product for monitoring data packet flows between virtual machines, vms, within a data centre
WO2015096681A1 (zh) 一种业务访问处理方法及装置
WO2017166643A1 (zh) 一种任务资源的量化方法和装置
KR20150054998A (ko) 클라우드 내에서 지리적으로 분산된 애플리케이션의 자동화 배치를 위한 방법 및 장치
CN106230971B (zh) 基于cdn的大文件分发方法
CN103607424B (zh) 一种服务器连接方法及服务器系统
CN108696400A (zh) 网络监测方法和装置
WO2020042427A1 (zh) 基于数据分片的对账方法、装置、计算机设备及存储介质
CN102281190A (zh) 负载均衡装置组网方法以及服务器、客户端接入方法
CN110839069B (zh) 一种节点数据部署方法、部署节点、系统及介质
CN104092756A (zh) 一种基于dht机制的云存储系统的资源动态分配方法
US11861410B2 (en) Cloud computing burst instance management through transfer of cloud computing task portions between resources satisfying burst criteria
WO2020119060A1 (zh) 容器资源调度方法和系统、服务器及计算机可读存储介质
CN109067869A (zh) 云计算系统中微服务节点的管理方法和装置
CN104144202B (zh) Hadoop分布式文件系统的访问方法、系统和装置
WO2017075967A1 (zh) 在线媒体服务的带宽分配方法及系统
CN111966289A (zh) 基于Kafka集群的分区优化方法和系统
CN110247812A (zh) 一种多集群管理方法、装置、系统及相关组件
US20110099265A1 (en) Defining enforcing and governing performance goals of a distributed caching infrastructure
CN109428926B (zh) 一种调度任务节点的方法和装置
CN104660689A (zh) 分布式计算系统
CN109039694B (zh) 一种面向业务的全局网络资源分配方法及装置
CN114153609A (zh) 资源控制方法及装置、电子设备、计算机可读存储介质
US9942354B1 (en) Managing service message rates in a computing service environment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination