CN115469980A

CN115469980A - 一种产品介质下载任务调度方法、装置及电子设备

Info

Publication number: CN115469980A
Application number: CN202210910767.2A
Authority: CN
Inventors: 浣浩; 邓志强; 邓龙亮; 洪水能
Original assignee: Tianyi Cloud Technology Co Ltd
Current assignee: Tianyi Cloud Technology Co Ltd
Priority date: 2022-07-29
Filing date: 2022-07-29
Publication date: 2022-12-13
Also published as: WO2024021497A1

Abstract

本申请提供一种产品介质下载任务调度方法、装置及电子设备，该方法包括：获取资源池集合中各资源池的属性信息；根据各资源池的属性信息所表征的当前产品介质下载强度，在资源池集合中筛选若干个目标资源池；控制介质中心响应每个目标资源池的一条产品介质下载任务，以使目标资源池从介质中心下载相应的产品介质。上述方案提供的方法，通过根据各资源池的当前产品介质下载强度，为资源池分配产品介质下载任务，避免出现单个资源池的产品介质下载强度过高的情况，进而避免造成资源池和介质中心的服务崩溃和带宽堵塞，为提高云平台系统安全性奠定了基础。

Description

一种产品介质下载任务调度方法、装置及电子设备

技术领域

本申请涉及网络技术领域，尤其涉及一种产品介质下载任务调度方法、装置及电子设备。

背景技术

资源池是云平台方针对用户所属的不同区域而进行各类机器和计算资源隔离的基本单位，云平台可根据实际场景划分为若干个资源池，资源池的用户可订购该资源池的产品和资源。在多资源池的云平台下，资源池在部署PaaS等软件产品时需要从统一的介质中心下载相应的产品介质。

但是，如果在短时间内同一资源池申请下载大量产品介质，则资源池和介质中心会启动许多下载线程，容易造成资源池和介质中心的服务崩溃和带宽堵塞，进而引发系统故障。

发明内容

本申请提供一种产品介质下载任务调度方法、装置及电子设备，以解决现有技术容易造成资源池和介质中心的服务崩溃和带宽堵塞等缺陷。

本申请第一个方面提供一种产品介质下载任务调度方法，包括：

获取资源池集合中各资源池的属性信息；

根据各所述资源池的属性信息所表征的当前产品介质下载强度，在所述资源池集合中筛选若干个目标资源池；

控制介质中心响应每个所述目标资源池的一条产品介质下载任务，以使所述目标资源池从所述介质中心下载相应的产品介质。

可选的，所述根据各所述资源池的属性信息所表征的当前产品介质下载强度，在所述资源池集合中筛选若干个目标资源池，包括：

根据各所述资源池的属性信息，确定各所述资源池的当前产品介质下载线程数量；

根据各所述资源池的当前产品介质下载线程数量，确定各所述资源池的当前产品介质下载强度；

将所述当前产品介质下载强度低于强度阈值的资源池，确定为所述目标资源池。

可选的，还包括：

根据所述介质中心的最大产品介质下载线程数量和所述资源池的总数，确定所述强度阈值。

可选的，所述根据所述介质中心的最大产品介质下载线程数量和所述资源池的总数，确定所述强度阈值，包括：

根据所述介质中心的最大产品介质下载线程数量和所述资源池的总数，确定每个资源池的产品介质下载线程平均量；

将所述产品介质下载线程平均量，确定为所述强度阈值。

可选的，在控制介质中心响应每个所述目标资源池的一条产品介质下载任务之后，所述方法还包括：

返回到所述获取资源池集合中各资源池的属性信息的步骤，以重新在所述资源池集合中筛选所述目标资源池。

可选的，还包括：

当所述介质中心的当前产品介质下载线程数量达到所述最大产品介质下载线程数量时，控制所述介质中心停止响应所述产品介质下载任务。

可选的，所述控制介质中心响应每个所述目标资源池的一条产品介质下载任务，包括：

控制介质中心响应每个所述目标资源池中优先级最高的一条产品介质下载任务；

其中，所述产品介质下载任务的优先级是根据产品优先级、产品订单渠道优先级、资源池带宽、产品介质文件大小和和产品订单时间综合确定的。

本申请第二个方面提供一种产品介质下载任务调度装置，包括：

获取模块，用于获取资源池集合中各资源池的属性信息；

筛选模块，用于根据各所述资源池的属性信息所表征的当前产品介质下载强度，在所述资源池集合中筛选若干个目标资源池；

调度模块，用于控制介质中心响应每个所述目标资源池的一条产品介质下载任务，以使所述目标资源池从所述介质中心下载相应的产品介质。

可选的，所述筛选模块，具体用于：

可选的，所述筛选模块，还用于：

可选的，所述筛选模块，具体用于：

将所述产品介质下载线程平均量，确定为所述强度阈值。

可选的，所述调度模块，还用于：

可选的，所述调度模块，具体用于：

本申请第三个方面提供一种电子设备，包括：至少一个处理器和存储器；

所述存储器存储计算机执行指令；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如上第一个方面以及第一个方面各种可能的设计所述的方法。

本申请第四个方面提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一个方面以及第一个方面各种可能的设计所述的方法。

本申请技术方案，具有如下优点：

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。

图1为本申请实施例基于的产品介质下载任务调度系统的结构示意图；

图2为本申请实施例提供的产品介质下载任务调度方法的流程示意图；

图3为本申请实施例提供的产品介质下载任务调度装置的结构示意图；

图4为本申请实施例提供的示例性的产品介质下载任务调度系统的结构示意图；

图5为本申请实施例提供的电子设备的结构示意图。

通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。在以下各实施例的描述中，“多个”的含义是两个以上，除非另有明确具体的限定。

下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本发明实施例进行描述。

首先，对本申请所基于的产品介质下载任务调度系统的结构进行说明：

本申请实施例提供的产品介质下载任务调度方法、装置及电子设备，适用于为云平台资源池集合中的资源池调度产品介质下载任务。如图1所示，为本申请实施例基于的产品介质下载任务调度系统的结构示意图，主要包括资源池集合、设有产品介质下载任务调度装置的介质中心。具体地，可以基于产品介质下载任务调度装置，对资源池集合中的资源池进行产品介质下载任务的调度，以控制各资源池与介质中心之间的产品介质下载线程的启动与否。

本申请实施例提供了一种产品介质下载任务调度方法，用于为云平台资源池集合中的资源池调度产品介质下载任务。本申请实施例的执行主体为电子设备，比如服务器、台式电脑、笔记本电脑、平板电脑及其他可用于为云平台资源池集合中的资源池调度产品介质下载任务的电子设备。

如图2所示，为本申请实施例提供的产品介质下载任务调度方法的流程示意图，该方法包括：

步骤201，获取资源池集合中各资源池的属性信息。

其中，资源池的属性信息至少包括资源池的当前产品介质下载线程数量、最大产品介质下载线程数量和未响应的产品介质下载任务数量。

步骤202，根据各资源池的属性信息所表征的当前产品介质下载强度，在资源池集合中筛选若干个目标资源池。

具体地，可以根据各资源池的属性信息中的当前产品介质下载线程数量这一指标所表征的当前产品介质下载强度，在资源池集合中选取当前产品介质下载强度较低的若干资源池，并将其作为目标资源池。

步骤203，控制介质中心响应每个目标资源池的一条产品介质下载任务，以使目标资源池从介质中心下载相应的产品介质。

需要说明的是，介质中心可以预先收集所有资源池上传的产品介质下载任务，介质中心基于本申请实施例提供的产品介质下载任务调度方法，在一个固定的时间段响应之前收集的产品介质下载任务，介质中心具体可以以通知的方式，向目标资源池推送已响应的产品介质下载任务，该资源池上传的产品介质下载任务至少包括产品标识和产品介质在介质中心的存储路径等信息。其中，该产品具体可以为PaaS等软件产品。

具体地，可以令介质中心按照预设的任务调度决策策略，向目标资源池推送对应的一条产品介质下载任务，以使目标资源池启动相应的产品介质下载线程，目标资源池从介质中心下载相应的产品介质。其中，产品介质至少包括产品安装包和产品安装工具等。

具体地，在一实施例中，可以控制介质中心响应每个目标资源池中优先级最高的一条产品介质下载任务。其中，产品介质下载任务的优先级是根据产品优先级、产品订单渠道优先级、资源池带宽、产品介质文件大小和产品订单时间综合确定的。

需要说明的是，针对任一资源池，介质中心将预先按照待响应的产品介质下载任务的优先级，构建产品介质下载任务的优先级队列，在优先级队列中，元素被赋予优先级。当访问元素时，具有最高优先级的元素最先输出，优先队列具有最高级先出的行为特征，因此介质中心响应的产品介质下载任务是目标资源池优先级最高的一条产品介质下载任务。其中，优先级队列中的元素即为产品介质下载任务。

具体地，可以根据如下公式，确定产品介质下载任务的优先级Grade(A)：

其中，i表示某资源池中的第i个产品介质下载任务,X_i(I₁)表示产品优先级分数，X_i(I₂)表示产品订单渠道优先级分数，X_i(I₃)表示资源池带宽分数，X_i(I₄)表示产品介质文件大小，X_i(I₅)表示产品订单时间分值，P_n表示不同因素分值对应的权重占比。

在上述实施例的基础上，为了能够实现产品介质下载任务的均匀调度，以保证系统平滑稳定运行，作为一种可实施的方式，在一实施例中，根据各资源池的属性信息所表征的当前产品介质下载强度，在资源池集合中筛选若干个目标资源池，包括：

步骤2021，根据各资源池的属性信息，确定各资源池的当前产品介质下载线程数量；

步骤2022，根据各资源池的当前产品介质下载线程数量，确定各资源池的当前产品介质下载强度；

步骤2023，将当前产品介质下载强度低于强度阈值的资源池，确定为目标资源池。

具体地，针对任一资源池，可以根据该资源池的当前产品介质下载线程数量的大小，分析其当前产品介质下载强度。其中，资源池的产品介质下载线程数量和产品介质下载强度呈正比。进一步地，将当前产品介质下载强度低于强度阈值的资源池，确定为目标资源池，即将当前产品介质下载线程数量相对较少的资源池，确定为目标资源池。

具体地，在一实施例中，可以根据介质中心的最大产品介质下载线程数量和资源池的总数，确定强度阈值。

具体地，可以按照单个资源池的产品介质下载强度承受能力，确定各资源池的强度阈值计算权重，进一步根据介质中心的最大产品介质下载线程数量和资源池的总量，确定每个资源池的产品介质下载线程平均量，然后根据每个资源池的产品介质下载线程平均量和对应的强度阈值计算权重，确定各资源池对应的强度阈值。其中，资源池的阈值计算权重越高对应的强度阈值越大。

其中，下载强度承受能力即为下载强度最大值，下载强度最大值和强度阈值为量化后的产品介质下载线程数量，可以直接等同于产品介质下载线程数量，也可以根据产品介质下载线程数量和单个线程的下载量确定。

具体地，在一实施例中，当云平台采用的资源池配置相同时，可以直接根据介质中心的最大产品介质下载线程数量和资源池的总数，确定每个资源池的产品介质下载线程平均量；将产品介质下载线程平均量，确定为强度阈值。

具体地，可以通过对介质中心的最大产品介质下载线程数量和资源池的总数进行除法计算，确定每个资源池的介质下载线程平均量，进而将介质下载线程平均量统一设定为每个资源池的强度阈值。

进一步地，在一实施例中，在控制介质中心响应每个目标资源池的一条产品介质下载任务之后，可以返回到获取资源池集合中各资源池的属性信息的步骤，以重新在资源池集合中筛选目标资源池。

具体地，在介质中心向目标资源池成功推送一条产品介质下载任务后，即介质中心响应每个目标资源池的一条产品介质下载任务之后，重新获取资源池集合中各资源池的属性信息，以根据当前的实际情况，重新筛选目标资源池，以开始新的一轮产品介质下载任务响应和推送。进一步地，当资源池集合中所有资源池都不满足该目标资源池筛选条件时，即目标资源池数量为零时，介质中心依然存在未响应的产品介质下载任务，则令介质中心响应所有资源池的一条产品介质下载任务，具体响应哪条产品介质下载任务可以根据产品介质下载任务的优先级确定，然后进入下一轮产品介质下载任务的响应和推送，即返回到获取资源池集合中各资源池的属性信息的步骤，以此类推，直至介质中心完成所有产品介质下载任务的响应和推送。

进一步地，在一实施例中，为了保证系统安全，可以当介质中心的当前产品介质下载线程数量达到最大产品介质下载线程数量时，控制介质中心停止响应产品介质下载任务。

类似地，在一实施例中，也可以在单个资源池的当前产品介质下载线程数量达到该资源池的最大产品介质下载线程数量时，停止响应该资源池的产品介质下载任务。

需要说明的是，在实际应用中，云平台中所有资源池的产品介质下载任务一般在一个固定的时间段完成，例如，可以基于预设的定时任务，按照预设周期(如1小时)，实现产品介质入库通知的下发和产品介质下载任务的推送。产品介质入库通知的下发即为资源池向介质中心上传产品介质下载任务，也就是介质中心收集产品介质下载任务，产品介质下载任务的推送即为介质中心响应产品介质下载任务，然后向对应的资源池推送请求响应通知。

本申请实施例提供的产品介质下载任务调度方法，通过获取资源池集合中各资源池的属性信息；根据各资源池的属性信息所表征的当前产品介质下载强度，在资源池集合中筛选若干个目标资源池；控制介质中心响应每个目标资源池的一条产品介质下载任务，以使目标资源池从介质中心下载相应的产品介质。上述方案提供的方法，通过根据各资源池的当前产品介质下载强度，为资源池分配产品介质下载任务，避免出现单个资源池的产品介质下载强度过高的情况，进而避免造成资源池和介质中心的服务崩溃和带宽堵塞，为提高云平台系统安全性奠定了基础。并且，通过对任务推送采取均匀分配，并根据多因素综合确定产品介质下载任务的优先级，实现了均衡分配各资源池的产品介质下载任务推送数量，以保证云平台系统平滑稳定运行。

本申请实施例提供了一种产品介质下载任务调度装置，用于执行上述实施例提供的产品介质下载任务调度方法。

如图3所示，为本申请实施例提供的产品介质下载任务调度装置的结构示意图。该产品介质下载任务调度装置30包括：获取模块301、筛选模块302和调度模块303。

其中，获取模块，用于获取资源池集合中各资源池的属性信息；筛选模块，用于根据各资源池的属性信息所表征的当前产品介质下载强度，在资源池集合中筛选若干个目标资源池；调度模块，用于控制介质中心响应每个目标资源池的一条产品介质下载任务，以使目标资源池从介质中心下载相应的产品介质。

具体地，在一实施例中，筛选模块，具体用于：

根据各资源池的属性信息，确定各资源池的当前产品介质下载线程数量；

根据各资源池的当前产品介质下载线程数量，确定各资源池的当前产品介质下载强度；

将当前产品介质下载强度低于强度阈值的资源池，确定为目标资源池。

具体地，在一实施例中，筛选模块，还用于：

根据介质中心的最大产品介质下载线程数量和资源池的总数，确定强度阈值。

具体地，在一实施例中，筛选模块，具体用于：

根据介质中心的最大产品介质下载线程数量和资源池的总数，确定每个资源池的产品介质下载线程平均量；

将产品介质下载线程平均量，确定为强度阈值。

具体地，在一实施例中，调度模块，还用于：

返回到获取资源池集合中各资源池的属性信息的步骤，以重新在资源池集合中筛选目标资源池。

具体地，在一实施例中，调度模块，还用于：

当介质中心的当前产品介质下载线程数量达到最大产品介质下载线程数量时，控制介质中心停止响应产品介质下载任务。

具体地，在一实施例中，调度模块，具体用于：

控制介质中心响应每个目标资源池中优先级最高的一条产品介质下载任务；

其中，产品介质下载任务的优先级是根据产品优先级、产品订单渠道优先级、资源池带宽、产品介质文件大小和和产品订单时间综合确定的。

示例性的，如图4所示，为本申请实施例提供的示例性的产品介质下载任务调度系统的结构示意图。介质中心包括数据库和存储中心，存储中心存储有产品介质。可以基于定时任务，在任一资源池确认有产品上线时，定时通知介质中心对新上线产品的产品介质进行入库，也就是向介质中心上传产品介质下载任务，这一通知将写入数据库作为入库记录，以实现定时更新通知状态，也就是确定介质中心当前有哪些未响应的产品介质下载任务，预设的定时任务还将根据该数据库的记录信息，定时触发推送通知，即介质中心响应资源池的产品介质下载任务。

关于本实施例中的产品介质下载任务调度装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

本申请实施例提供的产品介质下载任务调度装置，用于执行上述实施例提供的产品介质下载任务调度方法，其实现方式与原理相同，不再赘述。

本申请实施例提供了一种电子设备，用于执行上述实施例提供的产品介质下载任务调度方法。

如图5所示，为本申请实施例提供的电子设备的结构示意图。该电子设备50包括：至少一个处理器51和存储器52。

存储器存储计算机执行指令；至少一个处理器执行存储器存储的计算机执行指令，使得至少一个处理器执行如上实施例提供的产品介质下载任务调度方法。

本申请实施例提供的一种电子设备，用于执行上述实施例提供的产品介质下载任务调度方法，其实现方式与原理相同，不再赘述。

本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上任一实施例提供的产品介质下载任务调度方法。

本申请实施例的包含计算机可执行指令的存储介质，可用于存储前述实施例中提供的产品介质下载任务调度方法的计算机执行指令，其实现方式与原理相同，不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims

1.一种产品介质下载任务调度方法，其特征在于，包括：

获取资源池集合中各资源池的属性信息；

2.根据权利要求1所述的方法，其特征在于，所述根据各所述资源池的属性信息所表征的当前产品介质下载强度，在所述资源池集合中筛选若干个目标资源池，包括：

3.根据权利要求2所述的方法，其特征在于，还包括：

4.根据权利要求3所述的方法，其特征在于，所述根据所述介质中心的最大产品介质下载线程数量和所述资源池的总数，确定所述强度阈值，包括：

将所述产品介质下载线程平均量，确定为所述强度阈值。

5.根据权利要求3所述的方法，其特征在于，在控制介质中心响应每个所述目标资源池的一条产品介质下载任务之后，所述方法还包括：

6.根据权利要求5所述的方法，其特征在于，还包括：

7.根据权利要求1所述的方法，其特征在于，所述控制介质中心响应每个所述目标资源池的一条产品介质下载任务，包括：

8.一种产品介质下载任务调度装置，其特征在于，包括：

获取模块，用于获取资源池集合中各资源池的属性信息；

9.一种电子设备，其特征在于，包括：至少一个处理器和存储器；

所述存储器存储计算机执行指令；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如权利要求1至7任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如权利要求1至7任一项所述的方法。