CN111522667A - 容器云环境下基于镜像存在机制评分策略的资源调度方法 - Google Patents

容器云环境下基于镜像存在机制评分策略的资源调度方法 Download PDF

Info

Publication number
CN111522667A
CN111522667A CN202010344175.XA CN202010344175A CN111522667A CN 111522667 A CN111522667 A CN 111522667A CN 202010344175 A CN202010344175 A CN 202010344175A CN 111522667 A CN111522667 A CN 111522667A
Authority
CN
China
Prior art keywords
resource
scoring
strategy
node
mirror image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010344175.XA
Other languages
English (en)
Inventor
景宏磊
熊强
陈云亮
李建新
陈小岛
王力哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China University of Geosciences
Original Assignee
China University of Geosciences
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China University of Geosciences filed Critical China University of Geosciences
Priority to CN202010344175.XA priority Critical patent/CN111522667A/zh
Publication of CN111522667A publication Critical patent/CN111522667A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083Techniques for rebalancing the load in a distributed system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5072Grid computing

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明属于容器云资源调度技术领域,公开了一种容器云环境下基于镜像存在机制评分策略的资源调度方法,对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据;根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。本发明为容器集群中待调度任务筛选出最佳部署节点,减少集群任务执行时间,提高集群任务调度效率。

Description

容器云环境下基于镜像存在机制评分策略的资源调度方法
技术领域
本发明属于容器云资源调度技术领域,尤其涉及一种容器云环境下基于镜像存在机制评分策略的资源调度方法。
背景技术
目前,随着虚拟化技术和云计算技术的快速发展,资源调度是提高集群资源利用率并使成本最小化的关键技术,并且资源调度器能够将集群资源分配给运行任务。而集群资源分配离不开集群节点资源评分的合理性,资源调度器收集到集群中各节点的资源评分后,就可以依据待调度任务需求来分配最佳任务部署节点,从而达到提高任务调度效率和集群资源利用率。
现有技术有许多关于集群资源调度的研究成果。有研究人员设计了对资源有不同敏感度的负载均衡模块,解决了应用对资源有不同实际需求情况下的调度问题,以减少碎片化的资源。也有研究人员优化了Ceph集群数据副本存储策略,针对资源调度问题建立了一个优化模型,并基于此提出了两个方法,分别用于容器的部署和在线迁移。还有研究人员对集群资源调度模型进行了改进并考虑了网络因素,以对节点资源进行更全面的评分。但是其改进模型仅将网络因素作为节点评分要素却没有对网络因素的适用条件进行全面分析。例如当节点上存在任务运行所需镜像时,集群节点无须从远程仓库中下载任务运行所需要的镜像,此时网络因素是处于失效状态,该缺陷会导致资源调度方法不能为调度任务筛选出最佳部署节点,从而降低任务调度效率。
通过上述分析,现有技术存在的问题及缺陷为:(1)现有技术的节点评分方法考虑因素单一、节点资源评分不准确,在面对多资源约束的场景下无法很好的满足任务调度需求。
(2)大多数节点评分方法考虑了节点网络因素却未兼顾节点镜像因素,该类节点评分方法未全面考虑节点网络因素在节点评分方法中的适用性,例如当节点上存在调度任务运行的所需镜像时,节点无需从远程镜像仓库下载镜像,可直接运行调度任务;该缺陷导致调度算法不能为调度任务筛选出最佳部署节点,从而降低任务调度效率。
解决以上问题及缺陷的难度为:现有方法难以做到调度的性能和效率的统一,不能全面动态的评估节点的适用性。
解决以上问题及缺陷的意义为:
本发明为待调度任务筛选出最佳部署节点,减少集群任务执行时间,提高集群任务调度效率,降低集群成本开销。
发明内容
为了解决现有技术存在的问题,本发明提供了一种容器云环境下基于镜像存在机制评分策略的资源调度方法。本发明采用CPU、内存、网络和镜像四类资源因素并充分考虑网络因素在节点评分过程中的有效性,给集群节点评分满足以下两个挑战:(1)多方位节点资源评分(2)充分考虑了节点网络资源评分的适用性。
本发明是这样实现的,一种容器云环境下基于镜像存在机制评分策略的资源调度方法包括:
S1对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据。
S2基于基础数据构建得到各资源评分数据。
S3根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据。
S4根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
进一步,所述集群节点资源信息包括节点CPU资源使用信息、内存资源使用信息、网络资源信息和节点已存在的镜像信息。
进一步,所述待调度任务资源信息包括待调度任务CPU请求信息、内存请求信息和运行容器信息。
进一步,所述步骤S3具体为:通过计算节点CPU、内存和网络资源的剩余量相对节点各资源总量的占比来得出资源消耗最小策略评分数据,节点上资源剩余量越多,评分越高;通过计算节点CPU、内存和网络的资源使用率来得出资源消耗最均衡策略评分数据,节点上资源之间使用率越均衡,评分越高;通过计算节点上存在待调度任务运行所需镜像的大小来得出节点镜像评分数据,存在待调度任务运行所需镜像的大小越大,资源评分越高;
进一步,集群节点资源总量的计算方法,节点实际可用资源量等于节点资源配额值减去节点基本组件占用的资源值。其中记节点CPU配额为nodeCPU,节点内存配额为nodeMemory。
Figure BDA0002469545970000031
Figure BDA0002469545970000032
进一步,待调度任务运行所需镜像的大小计算方式,待调度任务中的每个容器在创建之初,其资源描述文件会对每个容器镜像定义镜像拉取策略。容器镜像拉取策略分为三种,分别为:
Always:该镜像拉取策略表示宿主机每次都会尝试去远程镜像仓库重新拉取最新的容器镜像。
IfNotPresent:该镜像拉取策略表示如果本地不存在相匹配的容器镜像,那么宿主机将会去远程镜像仓库拉取指定的容器镜像。如果本地存在相匹配的容器镜像,则使用本地存在的镜像。
Never:该镜像拉取策略表示宿主机上的只使用本地的容器镜像,如果本地不存在相匹配容器镜像则容器启动失败。
镜像因素在待调度任务中存在拉取策略为IfNotPresent的容器镜像时生效,所以仅将拉取策略为IfNotPresent的容器镜像大小计入待调度任务运行所需镜像的大小。
进一步,集群节点上资源使用量为节点上已运行任务的资源请求值,已运行任务的资源请求值等同于运行任务中所有容器对资源的请求值,而节点上已分配的资源值为所有运行任务的资源请求值之和。
Figure BDA0002469545970000041
Figure BDA0002469545970000042
Figure BDA0002469545970000043
Figure BDA0002469545970000044
进一步,所述步骤S4具体为,当待调度任务运行所需镜像的大小为0时,多资源约束下节点评分模型由资源消耗最小评分策略、资源消耗最均衡评分策略共同构建,当待调度任务运行所需镜像的大小大于0时,多资源约束下节点评分模型由资源消耗最小评分策略、资源消耗最均衡评分策略和基于节点镜像存在评分策略共同构建。
本发明的另一目的在于提供一种容器云环境下基于镜像存在机制评分策略的资源调度系统,所述容器云环境下基于镜像存在机制评分策略的资源调度系统包括:
各资源评分数据获取模块,用于对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据;
评分策略数据获取模块,用于根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;
节点评分模型构建模块,根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
本发明的另一目的在于提供一种接收用户输入程序存储介质,所存储的计算机程序使电子设备执行所述容器云环境下基于镜像存在机制评分策略的资源调度方法,包括:
对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;
基于基础数据构建得到各资源评分数据;
根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;
根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
本发明的另一目的在于提供一种存储在计算机可读介质上的计算机程序产品,包括计算机可读程序,供于电子装置上执行时,提供用户输入接口以实施所述容器云环境下基于镜像存在机制评分策略的资源调度方法。
结合上述的所有技术方案,本发明所具备的优点及积极效果为:
本发明提供的容器云环境下基于镜像存在机制评分策略的资源调度方法,对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据;根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型;传统资源调度方法在给调度节点评分时仅考虑了节点CPU、内存和网络三类因素,且对节点网络因素的使用条件考虑不全面,该缺陷导致资源调度方法不能为调度任务筛选出最佳部署节点,从而降低任务调度效率。本发明详细分析了节点网络因素的适用条件并额外增加了节点镜像评分因素,与传统的资源调度方法相比该发明的有益效果为:减少了集群任务执行时间,提高了集群任务调度效率。
结合实验或试验数据和现有技术对比得到的效果和优点:本实验将对本发明涉及的容器云环境下基于镜像存在机制评分策略的资源调度方法与传统的资源调度方法在任务调度性能上进行对比。从实验数据图3中可以看出本发明相对于传统的资源调度方法在待调度任务中存在同类任务时,可以减少任务创建所花费的时间,从而减少任务执行时间。在实验中,本发明任务创建累计花费时间为5637.53s,任务平均创建花费时间为84.02s;传统的资源调度方法任务创建累计花费时间为6718.39s,任务平均创建花费时间为98.65s;本发明相比传统的资源调度方法在总的创建时间上缩短1080.86s,在任务平均创建花费时间上缩短14.63s。此外任务执行时间越短那么表示集群任务更快的完成,集群任务所占用的资源就可以更快的得到释放以满足其他待调度任务的使用,从而提高集群任务调度效率。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图做简单的介绍,显而易见地,下面所描述的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的容器云环境下基于镜像存在机制评分策略的资源调度方法流程图。
图2是本发明实施例提供的容器云环境下基于镜像存在机制评分策略的资源调度方法原理图。
图3是本发明实施例提供的实验过程中本发明与现有技术对比示意图。图中,黑色方框的代表传统方法,三角表示本发明的方法。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
针对现有技术存在的问题,本发明提供了一种容器云环境下基于镜像存在机制评分策略的资源调度方法,下面结合附图对本发明作详细的描述。
如图1所示,本发明提供的容器云环境下基于镜像存在机制评分策略的资源调度方法包括:
S101,对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据。
S102,基于基础数据构建得到各资源评分数据。
S103,根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据。
S104,根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
本发明提供一种容器云环境下基于镜像存在机制评分策略的资源调度系统,包括:
各资源评分数据获取模块,用于对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据。
评分策略数据获取模块,用于根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据。
节点评分模型构建模块,根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
下面结合具体实施例对本发明作进一步描述。
实施例,如图2所示。
本发明实施例提供的容器云环境下基于镜像存在机制评分策略的资源调度方法包括:
S1对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据,收集所有候选节点的节点资源信息,资源信息使用动态数组nodeArrays保存。
表1为获取基础数据信息表
Figure BDA0002469545970000081
遍历候选节点nodeArrays,分别为每个候选节点计算CPU和内存资源总量,分别记为capacityCPU和capacityMemory,其值类型为整数。同时获取每个候选节点的网络带宽,记为capacityNetRate。
节点实际可用资源量等于节点资源配额值减去节点基本组件占用的资源值。其中记节点CPU配额为nodeCPU,节点内存配额为nodeMemory。
Figure BDA0002469545970000082
Figure BDA0002469545970000083
遍历候选节点nodeArrays,分别对每个候选节点上所有任务请求的CPU和内存值进行求和,记为totalMemory和totalCPU,同时获取该节点当前的网络传输速率,记为currentNetRate。
一个集群任务是由一个或几个容器共同来执行的,不同的容器其对资源的需求也不同,所以一个集群任务对节点的资源请求值为集群任务中所有容器运行的资源请求值之和。当前节点已分配的CPU资源值为所有集群任务CPU请求值之和。
Figure BDA0002469545970000091
Figure BDA0002469545970000092
S2基于基础数据构建得到各资源评分数据,节点的CPU资源得分cpuScorei为当前节点的CPU剩余量除以当前节点CPU总量。
Figure BDA0002469545970000093
节点的内存资源得分memoryScorei为当前节点的内存剩余量除以当前节点内存总量。
Figure BDA0002469545970000094
节点的网络传输速率得分netRateScorei为当前节点的网络传输速率除以当前节点网络带宽转换为同等单位的数值。
Figure BDA0002469545970000095
S3根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据,计算资源消耗最小策略最终得分。设CPU资源得分权重为δcpu,内存资源得分权重为δmemory,网络资源得分权重为δnetRate,节点各资源权重总和为1。
Figure BDA0002469545970000096
δcpumemorynetRate=1;
节点资源消耗最小策略得分。
Figure BDA0002469545970000101
计算资源消耗最均衡策略得分。节点资源得分均值为资源得分之和除以资源数量。
Figure BDA0002469545970000102
计算节点资源得分方差。
Figure BDA0002469545970000103
按照资源消耗最均衡的需求,资源综合方差越小其得分越高。将所有节点的资源综合方差计算出来,取资源综合方差最大的值,然后将所有节点的资源综合方差进行归一化处理。
σi∈(σ1234…,σn);
取节点资源综合方差最大值
σmax=MAX(σ123,…,σn)
节点资源综合方差归一化处理
Figure BDA0002469545970000104
节点资源消耗最均衡综合得分。
Figure BDA0002469545970000111
计算节点镜像得分。解析Pod任务的资源描述文件,将镜像拉取策略为IfNotPresent的容器镜像名和镜像大小记录在集合HashSet中,记为taskHashSet,HashSet中key为镜像名称,value为镜像大小。将HashSet中的镜像大小进行求和,其镜像大小之和记为totalImageSize,如果totalImageSize不为0,则启用该评分策略。
Figure BDA0002469545970000112
遍历所有候选节点并将节点上存在的容器镜像与taskHashSet中的容器镜像进行镜像名称和版本号对比,将容器镜像名称和版本号相同的镜像名与镜像大小记录在NodeHashSeti中。
遍历所有的NodeHashSeti并对当前的NodeHashSeti中镜像的大小进行求和,记为nodeTotalImageSizei,那么节点的辅助性策略最终得分为nodeTotalImageSizei除以totalImageSize乘以10。
Figure BDA0002469545970000113
S4根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型,设资源消耗最小策略权重为μ1,资源消耗最均衡策略权重为μ2,节点镜像策略权重为μ3,节点资源的最终得分为资源消耗最小策略与资源消耗最均衡策略的得分分别乘以各自策略的权重之和。
μ1+u2=1,μ3=1
Figure BDA0002469545970000121
下面结合效果对本发明作进一步描述。
本发明的容器云环境下基于镜像存在机制评分策略的资源调度方法,通过构建多资源约束下的节点评分模型,可以更全面的为集群节点进行资源评分,从而为待调度任务筛选出最佳任务部署节点;通过分析网络因素在节点评分时的适用情况,增加镜像存在机制的评分策略,可以弥补传统资源调度方法在给节点评分时网络因素失效的缺陷,减少任务创建时间,提高集群任务调度效率。
下面结合实验或试验数据对本发明作进一步描述。
实验步骤如下:
步骤1:依次创建14组待调度任务,每组5个待调度任务,每隔15分钟创建一组任务,每个待调度任务运行使用的镜像名称规则的数学表达如下:
Figure BDA0002469545970000122
imageNamei表示第i个待调度任务运行所需要的镜像名称,上述公式表示每组任务中的第5个待调度任务运行使用名称为nginx:0的镜像,即每组任务中的第5个任务属于同一类任务(同类任务运行所需镜像相同)。
步骤2:记录每次待调度任务创建时花费的时间。
步骤3:将每次记录的Pod任务创建时间按任务创建顺序进行阶段性求和,数学表达式如下。
Figure BDA0002469545970000123
上述公式中allTakeTimei表示前i个待调度任务创建所花费的时间总和。createPodTimej表示创建第j个待调度任务所花费的时间。
步骤4:将整理好的数据进行绘制图像,如图3,图中,黑色方框的代表传统方法,三角表示本发明的方法。
实验表格如下。
方法类型 任务创建累计花费时间 任务平均创建花费时间
本发明 5637.53 84.02s
传统资源调度方法 6718.39s 98.65s
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现,当然也可以全部通过硬件来实施。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上所述仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述容器云环境下基于镜像存在机制评分策略的资源调度方法包括:
对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据;
根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;
根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
2.如权利要求1所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述集群节点资源信息包括节点CPU资源使用信息、内存资源使用信息、网络资源信息和节点已存在的镜像信息。
3.如权利要求1所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述待调度任务资源信息包括待调度任务CPU请求信息、内存请求信息和运行容器信息。
4.如权利要求1所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述得到资源消耗最小策略评分数据的方法包括:
通过计算节点CPU、内存和网络资源的剩余量相对节点各资源总量的占比得出资源消耗最小策略评分数据,节点上资源剩余量越多,评分越高;
所述得到资源消耗最均衡策略评分数据的方法包括:
通过计算节点CPU、内存和网络的资源使用率得出资源消耗最均衡策略评分数据,节点上资源之间使用率越均衡,评分越高;
所述得到镜像存在机制评分策略评分数据的方法包括:
通过计算节点上存在待调度任务运行所需镜像的大小得出节点镜像评分数据,存在待调度任务运行所需镜像的大小越大,资源评分越高。
5.如权利要求4所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述得出资源消耗最小策略评分数据中,集群节点资源总量的计算方法包括:节点实际可用资源量等于节点资源配额值减去节点基本组件占用的资源值;节点CPU配额为nodeCPU,节点内存配额为nodeMemory;
Figure FDA0002469545960000021
Figure FDA0002469545960000022
所述得出资源消耗最均衡策略评分数据中,集群节点上资源使用量为节点上已运行任务的资源请求值,已运行任务的资源请求值等同于运行任务中所有容器对资源的请求值,而节点上已分配的资源值为所有运行任务的资源请求值之和;进一步包括:
Figure FDA0002469545960000023
Figure FDA0002469545960000024
Figure FDA0002469545960000025
Figure FDA0002469545960000026
6.如权利要求4所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,所述得出节点镜像评分数据中,待调度任务运行所需镜像的大小计算方式,待调度任务中的每个容器在创建初,资源描述文件对每个容器镜像定义镜像拉取策略;所述容器镜像拉取策略包括:
Always:宿主机每次去远程镜像仓库重新拉取最新的容器镜像;
IfNotPresent:如果本地不存在相匹配的容器镜像,那么宿主机去远程镜像仓库拉取指定的容器镜像;如果本地存在相匹配的容器镜像,则使用本地存在的镜像;
Never:宿主机上的只使用本地的容器镜像,如果本地不存在相匹配容器镜像则容器启动失败。
7.如权利要求1所述的容器云环境下基于镜像存在机制评分策略的资源调度方法,其特征在于,当待调度任务运行所需镜像的大小为0时,多资源约束下节点评分模型由资源消耗最小评分策略、资源消耗最均衡评分策略共同构建,当待调度任务运行所需镜像的大小大于0时,多资源约束下节点评分模型由资源消耗最小评分策略、资源消耗最均衡评分策略和基于节点镜像存在评分策略共同构建。
8.一种容器云环境下基于镜像存在机制评分策略的资源调度系统,其特征在于,所述容器云环境下基于镜像存在机制评分策略的资源调度系统包括:
各资源评分数据获取模块,用于对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;基于基础数据构建得到各资源评分数据;
评分策略数据获取模块,用于根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;
节点评分模型构建模块,根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
9.一种接收用户输入程序存储介质,所存储的计算机程序使电子设备执行权利要求1~7任意一项所述容器云环境下基于镜像存在机制评分策略的资源调度方法,包括:
对集群节点资源信息和待调度任务信息进行收集并处理得到基础数据;
基于基础数据构建得到各资源评分数据;
根据资源评分数据得到资源消耗最小策略评分数据、资源消耗最均衡策略评分数据和镜像存在机制评分策略评分数据;
根据所述资源消耗最小评分策略、资源消耗最均衡评分策略和镜像存在机制评分策略,构建多资源约束下节点评分模型。
10.一种存储在计算机可读介质上的计算机程序产品,包括计算机可读程序,供于电子装置上执行时,提供用户输入接口以实施如权利要求1~7任意一项所述容器云环境下基于镜像存在机制评分策略的资源调度方法。
CN202010344175.XA 2020-04-27 2020-04-27 容器云环境下基于镜像存在机制评分策略的资源调度方法 Pending CN111522667A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010344175.XA CN111522667A (zh) 2020-04-27 2020-04-27 容器云环境下基于镜像存在机制评分策略的资源调度方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010344175.XA CN111522667A (zh) 2020-04-27 2020-04-27 容器云环境下基于镜像存在机制评分策略的资源调度方法

Publications (1)

Publication Number Publication Date
CN111522667A true CN111522667A (zh) 2020-08-11

Family

ID=71906167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010344175.XA Pending CN111522667A (zh) 2020-04-27 2020-04-27 容器云环境下基于镜像存在机制评分策略的资源调度方法

Country Status (1)

Country Link
CN (1) CN111522667A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527463A (zh) * 2020-12-17 2021-03-19 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法
CN113064694A (zh) * 2021-03-12 2021-07-02 深信服科技股份有限公司 资源调度方法、装置、电子设备和存储介质
CN113867919A (zh) * 2021-10-08 2021-12-31 中国联合网络通信集团有限公司 Kubernetes集群调度方法、系统、设备及介质
CN113900822A (zh) * 2021-10-27 2022-01-07 哈尔滨理工大学 一种新的权重可变的资源调度方法
CN114942830A (zh) * 2022-06-30 2022-08-26 中国电信股份有限公司 容器调度方法、容器调度装置、存储介质和电子设备
CN117729204A (zh) * 2024-02-06 2024-03-19 山东大学 一种基于监控感知的k8s容器调度方法及系统
CN117729204B (zh) * 2024-02-06 2024-05-10 山东大学 一种基于监控感知的k8s容器调度方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018001004A1 (zh) * 2016-06-27 2018-01-04 中兴通讯股份有限公司 一种基于Docker的云平台控制方法及装置
CN108519911A (zh) * 2018-03-23 2018-09-11 上饶市中科院云计算中心大数据研究院 一种基于容器的集群管理系统中资源的调度方法和装置
CN108829509A (zh) * 2018-05-03 2018-11-16 山东汇贸电子口岸有限公司 基于国产cpu和操作系统的分布式容器集群框架资源管理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018001004A1 (zh) * 2016-06-27 2018-01-04 中兴通讯股份有限公司 一种基于Docker的云平台控制方法及装置
CN108519911A (zh) * 2018-03-23 2018-09-11 上饶市中科院云计算中心大数据研究院 一种基于容器的集群管理系统中资源的调度方法和装置
CN108829509A (zh) * 2018-05-03 2018-11-16 山东汇贸电子口岸有限公司 基于国产cpu和操作系统的分布式容器集群框架资源管理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈文楷: "基于docker容器的高并发web系统架构设计与实现" *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527463A (zh) * 2020-12-17 2021-03-19 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法
CN112527463B (zh) * 2020-12-17 2023-08-04 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法
CN113064694A (zh) * 2021-03-12 2021-07-02 深信服科技股份有限公司 资源调度方法、装置、电子设备和存储介质
CN113867919A (zh) * 2021-10-08 2021-12-31 中国联合网络通信集团有限公司 Kubernetes集群调度方法、系统、设备及介质
CN113867919B (zh) * 2021-10-08 2024-05-07 中国联合网络通信集团有限公司 Kubernetes集群调度方法、系统、设备及介质
CN113900822A (zh) * 2021-10-27 2022-01-07 哈尔滨理工大学 一种新的权重可变的资源调度方法
CN114942830A (zh) * 2022-06-30 2022-08-26 中国电信股份有限公司 容器调度方法、容器调度装置、存储介质和电子设备
CN117729204A (zh) * 2024-02-06 2024-03-19 山东大学 一种基于监控感知的k8s容器调度方法及系统
CN117729204B (zh) * 2024-02-06 2024-05-10 山东大学 一种基于监控感知的k8s容器调度方法及系统

Similar Documents

Publication Publication Date Title
CN111522667A (zh) 容器云环境下基于镜像存在机制评分策略的资源调度方法
US20080282267A1 (en) Dynamic Application Instance Placement in Data Center Environments
CN114741207B (zh) 一种基于多维度组合并行的gpu资源调度方法和系统
CN112052092B (zh) 一种风险感知的边缘计算任务分配方法
CN112579273B (zh) 任务调度方法及装置、计算机可读存储介质
CN113946431B (zh) 一种资源调度方法、系统、介质及计算设备
CN113037877A (zh) 云边端架构下时空数据及资源调度的优化方法
CN113822456A (zh) 一种云雾混构环境下基于深度强化学习的服务组合优化部署方法
CN112835698A (zh) 一种基于异构集群的请求分类处理的动态负载均衡方法
CN115408152A (zh) 一种自适应资源匹配获取方法及系统
CN105740085A (zh) 容错处理方法及装置
CN116467076A (zh) 一种基于集群可用资源的多集群调度方法及系统
CN112882805A (zh) 一种任务资源约束的利润优化调度方法
CN110826911B (zh) 基于大数据的决策方法、设备及介质
CN117311973A (zh) 计算设备调度方法、装置、非易失性存储介质及电子设备
Li et al. Cost-aware scheduling for ensuring software performance and reliability under heterogeneous workloads of hybrid cloud
CN110297694A (zh) 一种基于资源分类和任务优先级的启发式云计算调度方法
CN112306642B (zh) 一种基于稳定匹配博弈理论的工作流调度方法
CN115391047A (zh) 资源调度方法及装置
CN115033616A (zh) 一种基于多轮采样的数据筛查规则验证方法及其装置
CN114401195A (zh) 服务器的容量调整方法及装置、存储介质及电子设备
KR102205808B1 (ko) 인공지능 학습데이터 생성을 위한 크라우드소싱 기반 프로젝트의 예상 작업 수량을 이용한 작업자 풀의 적정 작업자 수 확정 방법
Kadhim et al. Deadline and Cost Aware Dynamic Task Scheduling in Cloud Computing Based on Stackelberg Game.
CN111784029A (zh) 一种雾节点资源分配方法
CN111858070A (zh) 计算资源配置方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination