CN109634735A - 一种调度Pod的方法及装置 - Google Patents

一种调度Pod的方法及装置 Download PDF

Info

Publication number
CN109634735A
CN109634735A CN201811550728.6A CN201811550728A CN109634735A CN 109634735 A CN109634735 A CN 109634735A CN 201811550728 A CN201811550728 A CN 201811550728A CN 109634735 A CN109634735 A CN 109634735A
Authority
CN
China
Prior art keywords
pod
alluxio
storage system
node
location information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811550728.6A
Other languages
English (en)
Inventor
刘青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201811550728.6A priority Critical patent/CN109634735A/zh
Publication of CN109634735A publication Critical patent/CN109634735A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种调度Pod的方法及装置,所述方法包括:在Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。本申请在Kubernetes系统主节点创建一Pod时,通过获取创建该Pod的资源数据所在的Worker节点的位置信息,然后将该Pod创建调度到该Worker节点上,让Pod应用可以直接使用内存数据,避免了网络传输速率对于Alluxio系统性能的限制,从而最大化了使用Alluxio系统带来的性能提升。

Description

一种调度Pod的方法及装置
技术领域
本申请涉及存储管理技术领域,尤其涉及一种调度Pod的方法及装置。
背景技术
Alluxio是世界上第一个以内存为中心的虚拟的分布式存储系统,它统一了数据访问的方式,为上层计算框架和底层存储系统构建了桥梁。应用只需要连接Alluxio即可访问存储在底层任意存储系统中的数据。此外,Alluxio的以内存为中心的架构使得数据的访问速度能比现有常规方案快几个数量级。
Alluxio系统采用Master+Worker的模式,其中,主节点Master是管理节点用来与每个Worker节点进行通信,Master会主动收集Worker节点服务器上的内存中所加载的数据信息。当应用程序需要使用数据时候,需要先与Master节点建立连接,然后获取内存中加载的数据。Master只是作为管理节点管理其他Worker节点,实际的文件信息不会加载到Master所在服务器的内存中。Worker负责将服务器本地磁盘或者存储系统上的数据加载到服务器的内存中,并将内存中的数据信息目录发送给Master,还会将内存中的数据,根据一定的替换策略与磁盘上的数据做替换,保证应用程序使用内存中数据的命中率。
基于Alluxio卓越的读写性能,Kubernetes系统也开始集成使用Alluxio的存储方案。Kubernetes(也被称为k8s)是Google开源的容器集群管理系统,它是一个完备的分布式系统支撑平台,具有完备的集群管理能力。同时,Kubernetes系统也是一个全新的基于容器技术的分布式架构领先方案,在Docker技术的基础上,为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能,提高了大规模容器集群管理的便捷性。
在集群管理方面,Kubernetes将集群中的机器划分为一个主节点Master和一群工作节点Node,其中,Master节点是集群的管理节点,负责管理集群,提供集群的资源数据访问入口,关联工作节点Node。在Master节点上运行着集群管理相关的一组进程kube-apiserver、kube-controller-manager和kube-scheduler,这些进程实现了整个集群的资源管理、Pod调度、弹性伸缩、安全控制、系统监控和纠错等管理能力,并且都是全自动完成的。Node是Kubernetes集群架构中运行Pod的服务节点(亦叫agent或minion),它是Kubernetes集群操作的单元,用来承载被分配Pod的运行,是Pod运行的宿主机,关联Master管理节点,拥有名称和IP、系统资源信息。Node作为集群中的工作节点,运行真正的应用程序,在Node上由Kubernetes管理的最小运行单元是Pod。在Node上运行着Kubernetes的kubelet、kube-proxy服务进程,这些服务进程负责Pod的创建、启动、监控、重启、销毁以及实现软件模式的负载均衡器。
在集成了Alluxio的Kuberenetes系统中,所创建的Pod应用可以直接从Alluxio系统中读取数据,这样就提高了Pod对数据的处理效率。但是,由于Alluxio系统是分布式系统,当Alluxio存在多个Worker节点时候,数据会分布在每个Worker节点的内存中,当Pod应用所在的宿主机的内存中没有Pod所需要的数据时候,需要通过网络从其他Worker节点的内存中读取,这样网络的传输速率就会变成数据读取速率的限制条件,当网络速率高时候,不会影响Alluxio的读写性能,反之则会让Alluxio性能无法发挥。
针对上述现有技术中在网络速率低时Pod应用通过网络从其他Worker节点的内存中读取数据的情况下存在的问题,如何提高此情况下Pod应用读写数据的速率,避免网络传输速率对于Alluxio系统性能的限制,从而最大化使用Alluxio系统带来的性能提升,目前现有技术中还没有相关的解决方案。
发明内容
本申请的主要目的在于提出一种调度Pod的方法,能够解决现有技术中在网络速率低时Pod应用通过网络从其他Worker节点的内存中读取数据的情况下存在的问题,提高了此情况下Pod应用读写数据的速率,避免了网络传输速率对于Alluxio系统性能的限制,从而最大化了使用Alluxio系统带来的性能提升。
为实现上述目的,本申请实施例提供了一种调度Pod的方法,应用于使用Alluxio存储系统的Kubernetes系统,包括:
在Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
可选地,所述获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,包括:
所述Kubernetes系统主节点向Alluxio存储系统主节点发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
接收所述Alluxio存储系统主节点根据所述请求信息所返回的查询结果;
根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息。
可选地,其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
本申请实施例还提供了一种调度Pod的方法,应用于服务于Kubernetes系统的Alluxio存储系统,包括:
Alluxio存储系统主节点在Kubernetes系统主节点创建一Pod时,根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,使其调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
可选地,所述根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,包括:
所述Alluxio存储系统主节点接收所述Kubernetes系统主节点发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
将查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点。
可选地,其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
本申请实施例还提供了一种调度Pod的装置,设置于使用Alluxio存储系统的Kubernetes系统主节点上,包括:
Pod资源位置获取模块,设置为在所述Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod调度模块,设置为调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
可选地,所述Pod资源位置获取模块包括:
Pod资源位置请求发送模块,设置为向Alluxio存储系统主节点发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置接收模块,设置为接收所述Alluxio存储系统主节点根据所述请求信息所返回的查询结果,根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息。
本申请实施例还提供了一种调度Pod的装置,设置于服务于Kubernetes系统的Alluxio存储系统主节点上,包括:
Pod资源位置发送模块,设置为在Kubernetes系统主节点创建一Pod时,根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,使其调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
可选地,所述Pod资源位置发送模块包括:
Pod资源位置请求接收模块,设置为接收所述Kubernetes系统主节点发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置结果查询模块,设置为根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置结果发送模块,设置为将所述Pod资源位置结果查询模块查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点。
本申请提出的技术方案包括:在Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
本申请在Kubernetes系统主节点创建一Pod时,通过获取创建该Pod的资源数据所在的Worker节点的位置信息,从而事先知道了所需数据在哪个Worker节点的内存中,然后将该Pod创建调度到该Worker节点上,让Pod应用可以直接使用内存数据,解决了现有技术中在网络速率低时Pod应用通过网络从其他Worker节点的内存中读取数据的情况下存在的问题,提高了此情况下Pod应用读写数据的速率,避免了网络传输速率对于Alluxio系统性能的限制,从而最大化了使用Alluxio系统带来的性能提升。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1所示为本申请实施例1的Pod调度方法流程图;
图2所示为本申请实施例2的Pod调度方法流程图;
图3所示为本申请应用实例系统部属示意图;
图4所示为本申请应用实例Pod调度示意图;
图5所示为本申请实施例3的Pod调度装置结构图;
图6所示为本申请实施例4的Pod调度装置结构图。
本申请目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
下文中将参考附图并结合实施例来详细说明本申请。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
图1所示为本申请实施例1的Pod调度方法流程图,应用于使用Alluxio存储系统的Kubernetes系统,包括以下步骤:
步骤101:在Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
在Kubernetes系统中,Kubernetes系统主节点Master负责Pod创建并对Pod进行调度,Pod运行于Node节点上,一个Pod可以包含一个容器或者多个相关容器,Pod内包含的容器运行在同一宿主机上,使用相同的网络命名空间、IP地址和端口,能够通过本地主机(localhost)进行通信。Kubernetes系统主节点Master在创建Pod时,需要一定的资源数据,在使用了Alluxio存储系统的Kubernetes系统中,这些资源数据存储在对应的Worker节点的内存中,Pod在启动运行时,会从对应的Worker节点的内存中读取与其相关的资源数据。如果在创建Pod时事先知道所需数据在哪个Worker节点的内存中,并在创建Pod时将其创建在对应的Worker节点上,则Pod在使用数据的时候就可以通过直接读取服务器上的内存来获取,进而避免Pod和数据不在一个服务器上,数据需要通过网络传输的问题。
在获取创建所述Pod的资源数据所在的Worker节点的位置信息时,可以通过如下步骤进行:
步骤1011:Kubernetes系统主节点向Alluxio存储系统主节点发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,在请求信息中包含创建所述Pod的资源数据的存储路径信息。该存储路径信息为资源数据在磁盘上的存储地址,比如:/home/testFile/test.txt。
在Kubernetes系统主节点Master向Alluxio存储系统主节点Master发送请求信息之前,如果Kubernetes系统主节点Master与Alluxio存储系统主节点Master还未连接,则双方通过信息交互建立连接。至于如何通过信息交互建立连接,属于现有技术,在此不再赘述。
步骤1012:接收所述Alluxio存储系统主节点Master根据所述请求信息所返回的查询结果;
其中,该查询结果中包含创建所述Pod的资源数据所在的Worker节点的位置信息。该位置信息为创建所述Pod的资源数据所在的Worker节点的IP地址。
步骤1013:根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息。
步骤102:调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上;
在上面步骤101中,Kubernetes系统主节点Master获取到了创建所述Pod的资源数据所在的Worker节点的位置信息,则在本步骤中根据该位置信息执行调度所述Pod创建在对应所述位置信息的Worker节点上的操作。具体如何调度,属于现有技术,在此不再赘述。
在执行完本步骤操作后,Pod在运行过程中使用数据的时候就可以通过直接读取该Worker节点上的内存来获取,从而避免了Pod和数据不在一个服务器上,数据需要通过网络传输的问题。
图2所示为本申请实施例2的Pod调度方法流程图,应用于集成了Kubernetes系统的Alluxio存储系统,包括以下步骤:
步骤201:Alluxio存储系统主节点在Kubernetes系统主节点创建一Pod时,根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,使其调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
具体地,Alluxio存储系统主节点根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,可以通过如下步骤进行:
步骤2011:所述Alluxio存储系统主节点接收所述Kubernetes系统主节点发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,在请求信息中包含创建所述Pod的资源数据的存储路径信息。
步骤2012:根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
具体地,Alluxio存储系统主节点Master分析请求信息中所包含的创建所述Pod的资源数据的存储路径信息,根据存储路径信息获知数据位于哪个Worker节点服务器的内存中,即可查询到创建所述Pod的资源数据所在的Worker节点的位置信息。
步骤2013:将查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点。
为进一步清楚地说明,以一个应用实例对上述方法进行说明:
发明人应用本申请实施例1和2的方法编写了一个Alluxio client终端程序,将Alluxio系统的主节点Master和Kubernetes的主节点Master部署在同一台物理服务器A上,Alluxio系统的Worker节点也和Kubernetes的Node节点复用服务器B、C和D,使Alluxioclient终端程序运行在服务器A上,应用实例系统部属示意图如图3所示,接下来执行如下步骤:
1)在Kubernetes系统主节点Master创建一Pod时,与Alluxio系统的主节点Master建立连接;
2)所述Kubernetes系统主节点Master向Alluxio存储系统主节点Master发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,所述请求信息中包含创建所述Pod的资源数据的存储路径信息;
3)所述Alluxio存储系统主节点Master接收所述Kubernetes系统主节点Master发送的请求信息;根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
4)所述Alluxio存储系统主节点Master将查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点Master;
5)所述Kubernetes系统主节点Master接收所述Alluxio存储系统主节点Master根据所述请求信息所返回的查询结果;根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
6)所述Kubernetes系统主节点Master调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上,Pod调度示意图如图4所示。
这样,Pod在使用数据时候可以直接读取服务器上的内存来获取,进而避免Pod和数据不在一个服务器上,数据需要通过网络传输的问题。
这里需要说明的是,本申请在Kubernetes系统主节点Master调度Pod创建时,通过获取创建该Pod的资源数据所在的Worker节点的位置信息,从而事先知道了所需数据在哪个Worker节点的内存中,然后将该Pod创建调度到该Worker节点上,让Pod应用可以直接使用内存数据,解决了现有技术中在网络速率低时Pod应用通过网络从其他Worker节点的内存中读取数据的情况下存在的问题,提高了此情况下Pod应用读写数据的速率,避免了网络传输速率对于Alluxio系统性能的限制,从而最大化了使用Alluxio系统带来的性能提升。
图5为本申请实施例3的Pod调度装置结构图,设置于使用Alluxio存储系统的Kubernetes系统主节点Master上,如图5所示,该装置包括:
Pod资源位置获取模块,设置为在所述Kubernetes系统主节点Master调度Pod创建时,获取创建所述Pod的资源数据所在的Worker节点的位置信息;
Pod调度模块,设置为调度所述Pod创建在对应所述位置信息的Worker节点上。
进一步地,所述Pod资源位置获取模块包括:
Pod资源位置请求发送模块,设置为向Alluxio存储系统主节点Master发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的Worker节点的位置信息;
Pod资源位置接收模块,设置为接收所述Alluxio存储系统主节点Master根据所述请求信息所返回的查询结果,并根据所述查询结果获取创建所述Pod的资源数据所在的Worker节点的位置信息。
其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
图6为本申请实施例4的Pod调度装置结构图,设置于集成了Kubernetes系统的Alluxio存储系统主节点Master上,如图6所示,该装置包括:
Pod资源位置发送模块,设置为在Kubernetes系统主节点Master调度Pod创建时,向所述Kubernetes系统主节点Master发送创建所述Pod的资源数据所在的Worker节点的位置信息,使其调度所述Pod创建在对应所述位置信息的Worker节点上。
进一步地,所述Pod资源位置发送模块包括:
Pod资源位置请求接收模块,设置为接收所述Kubernetes系统主节点Master发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的Worker节点的位置信息;
Pod资源位置结果查询模块,设置为根据所述请求信息查询创建所述Pod的资源数据所在的Worker节点的位置信息;
Pod资源位置结果发送模块,设置为将所述Pod资源位置结果查询模块查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点Master。
其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (10)

1.一种调度Pod的方法,应用于使用Alluxio存储系统的Kubernetes系统,其特征在于,包括:
在Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
2.根据权利要求1所述的方法,其特征在于,所述获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,包括:
所述Kubernetes系统主节点向Alluxio存储系统主节点发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
接收所述Alluxio存储系统主节点根据所述请求信息所返回的查询结果;
根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息。
3.根据权利要求2所述的方法,其特征在于,其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
4.一种调度Pod的方法,应用于服务于Kubernetes系统的Alluxio存储系统,其特征在于,包括:
Alluxio存储系统主节点在Kubernetes系统主节点创建一Pod时,根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,使其调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
5.根据权利要求4所述的方法,其特征在于,所述根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,包括:
所述Alluxio存储系统主节点接收所述Kubernetes系统主节点发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
将查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点。
6.根据权利要求5所述的方法,其特征在于,其中,所述请求信息中包含创建所述Pod的资源数据的存储路径信息。
7.一种调度Pod的装置,设置于使用Alluxio存储系统的Kubernetes系统主节点上,其特征在于,包括:
Pod资源位置获取模块,设置为在所述Kubernetes系统主节点创建一Pod时,获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod调度模块,设置为调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
8.根据权利要求7所述的装置,其特征在于,所述Pod资源位置获取模块包括:
Pod资源位置请求发送模块,设置为向Alluxio存储系统主节点发送请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置接收模块,设置为接收所述Alluxio存储系统主节点根据所述请求信息所返回的查询结果,根据所述查询结果获取创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息。
9.一种调度Pod的装置,设置于服务于Kubernetes系统的Alluxio存储系统主节点上,其特征在于,包括:
Pod资源位置发送模块,设置为在Kubernetes系统主节点创建一Pod时,根据所述Kubernetes系统主节点的请求向其发送创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息,使其调度所述Pod创建在所述位置信息对应的所述Alluxio存储系统的Worker节点上。
10.根据权利要求9所述的装置,其特征在于,所述Pod资源位置发送模块包括:
Pod资源位置请求接收模块,设置为接收所述Kubernetes系统主节点发送的请求信息,其中,所述请求信息用于查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置结果查询模块,设置为根据所述请求信息查询创建所述Pod的资源数据所在的所述Alluxio存储系统的Worker节点的位置信息;
Pod资源位置结果发送模块,设置为将所述Pod资源位置结果查询模块查询到的所述位置信息作为查询结果返回给所述Kubernetes系统主节点。
CN201811550728.6A 2018-12-18 2018-12-18 一种调度Pod的方法及装置 Pending CN109634735A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811550728.6A CN109634735A (zh) 2018-12-18 2018-12-18 一种调度Pod的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811550728.6A CN109634735A (zh) 2018-12-18 2018-12-18 一种调度Pod的方法及装置

Publications (1)

Publication Number Publication Date
CN109634735A true CN109634735A (zh) 2019-04-16

Family

ID=66075151

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811550728.6A Pending CN109634735A (zh) 2018-12-18 2018-12-18 一种调度Pod的方法及装置

Country Status (1)

Country Link
CN (1) CN109634735A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111399983A (zh) * 2020-03-18 2020-07-10 北京达佳互联信息技术有限公司 基于容器编排调度服务的调度方法及装置
CN111783102A (zh) * 2020-06-30 2020-10-16 福建健康之路信息技术有限公司 一种安全驱逐Kubernetes集群中节点的方法和存储设备
CN112350842A (zh) * 2019-08-08 2021-02-09 深圳致星科技有限公司 一种重置分布式训练任务训练过程中数据传输网络的方法
CN113806090A (zh) * 2021-09-17 2021-12-17 东云睿连(武汉)计算技术有限公司 一种基于Alluxio的大数据作业运行方法和系统
CN114139723A (zh) * 2021-11-30 2022-03-04 支付宝(杭州)信息技术有限公司 用于深度学习模型训练的方法、装置及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106027643A (zh) * 2016-05-18 2016-10-12 无锡华云数据技术服务有限公司 一种基于Kubernetes容器集群管理系统的资源调度方法
CN106682167A (zh) * 2016-12-26 2017-05-17 努比亚技术有限公司 用户行为数据的统计装置及方法
CN108108223A (zh) * 2017-11-30 2018-06-01 国网浙江省电力公司信息通信分公司 基于Kubernetes的容器管理平台
CN108228354A (zh) * 2017-12-29 2018-06-29 杭州朗和科技有限公司 调度方法、系统、计算机设备和介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106027643A (zh) * 2016-05-18 2016-10-12 无锡华云数据技术服务有限公司 一种基于Kubernetes容器集群管理系统的资源调度方法
CN106682167A (zh) * 2016-12-26 2017-05-17 努比亚技术有限公司 用户行为数据的统计装置及方法
CN108108223A (zh) * 2017-11-30 2018-06-01 国网浙江省电力公司信息通信分公司 基于Kubernetes的容器管理平台
CN108228354A (zh) * 2017-12-29 2018-06-29 杭州朗和科技有限公司 调度方法、系统、计算机设备和介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ANDROID路上的人: "Alluxio的整体架构与数据流形式 https://blog.csdn.net/Androidlushangderen/article/details/81142285?depth_1-utm_source=distribute.wap_relevant.none-task-blog-BlogCommendFromBaidu-5&utm_source=distribute.wap_relevant.none-task-blog-BlogCommendFromBaidu-5", 《ALLUXIO的整体架构与数据流形式 ANDROID路上的人,CSDN博客》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112350842A (zh) * 2019-08-08 2021-02-09 深圳致星科技有限公司 一种重置分布式训练任务训练过程中数据传输网络的方法
CN112350842B (zh) * 2019-08-08 2023-04-07 深圳致星科技有限公司 一种重置分布式训练任务训练过程中数据传输网络的方法
CN111399983A (zh) * 2020-03-18 2020-07-10 北京达佳互联信息技术有限公司 基于容器编排调度服务的调度方法及装置
CN111399983B (zh) * 2020-03-18 2024-05-14 北京达佳互联信息技术有限公司 基于容器编排调度服务的调度方法及装置
CN111783102A (zh) * 2020-06-30 2020-10-16 福建健康之路信息技术有限公司 一种安全驱逐Kubernetes集群中节点的方法和存储设备
CN111783102B (zh) * 2020-06-30 2022-06-14 福建健康之路信息技术有限公司 一种安全驱逐Kubernetes集群中节点的方法和存储设备
CN113806090A (zh) * 2021-09-17 2021-12-17 东云睿连(武汉)计算技术有限公司 一种基于Alluxio的大数据作业运行方法和系统
CN114139723A (zh) * 2021-11-30 2022-03-04 支付宝(杭州)信息技术有限公司 用于深度学习模型训练的方法、装置及系统

Similar Documents

Publication Publication Date Title
CN109634735A (zh) 一种调度Pod的方法及装置
CN104486445B (zh) 一种基于云平台的分布式可扩展资源监控系统
CN105897946B (zh) 一种访问地址的获取方法及系统
CN112787708B (zh) 基于微服务的卫星地面站监控管理架构
CN110166409A (zh) 设备接入方法、相关平台及计算机存储介质
CN109600768A (zh) 网络切片的管理方法、设备及系统
CN104539681B (zh) 分布式gis加速系统和gis服务的处理方法
CN102333029B (zh) 一种服务器集群系统中的路由方法
CN108965381A (zh) 基于Nginx的负载均衡实现方法、装置、计算机设备和介质
CN101257406B (zh) 网元发现方法和系统
CN101931619B (zh) 可插入的联系解析
CN110191148A (zh) 一种面向边缘计算的统计函数分布式执行方法及系统
CN108805655A (zh) 车辆分时共享管理方法及服务平台
JP2008538428A5 (zh)
CN110474940A (zh) 请求调度方法、装置、电子设备、及介质
CN102891768A (zh) 网络管理的方法和网元
CN103401897A (zh) 一种分布式服务注册中心构建方法
CN110476444A (zh) 用于网络服务的标识符分配和/或标识符映射的网络实体和方法
CN104780221A (zh) 中小企业知识产权综合服务平台系统
CN106375442A (zh) 一种跨平台管理设备信息的方法和装置
CN106713378A (zh) 实现多个应用服务器提供服务的方法和系统
CN108989399A (zh) 一种集群公共数据查询方法、系统、装置及可读存储介质
CN109005433A (zh) 一种视频云服务平台架构及实现方法
CN110351532A (zh) 视频大数据云平台云存储服务方法
CN103440298A (zh) 数据访问管理装置和管理方法以及数据库服务平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190416