CN114489512A - 限定容器容量的方法及装置、电子设备、存储介质 - Google Patents

限定容器容量的方法及装置、电子设备、存储介质 Download PDF

Info

Publication number
CN114489512A
CN114489512A CN202210126329.7A CN202210126329A CN114489512A CN 114489512 A CN114489512 A CN 114489512A CN 202210126329 A CN202210126329 A CN 202210126329A CN 114489512 A CN114489512 A CN 114489512A
Authority
CN
China
Prior art keywords
container
capacity
csi
information
nfs server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210126329.7A
Other languages
English (en)
Inventor
李祥哲
徐春明
赵建星
樊建刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jingdong Technology Information Technology Co Ltd
Original Assignee
Jingdong Technology Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jingdong Technology Information Technology Co Ltd filed Critical Jingdong Technology Information Technology Co Ltd
Priority to CN202210126329.7A priority Critical patent/CN114489512A/zh
Publication of CN114489512A publication Critical patent/CN114489512A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0674—Disk device
    • G06F3/0676—Magnetic disk device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种限定容器容量的方法及装置、电子设备、存储介质，涉及计算机技术领域，可以应用于Kubernetes使用NFS存储的场景。该限定容器容量的方法包括：响应于监测到创建容器PV的声明信息，调用CSI将NFS服务器的共享目录挂载到目标工作节点的容器组中，并在共享目录下创建PV子目录，声明信息中包括容器PV的设定容量信息；通过CSI向NFS服务器发送容量请求以指示NFS服务器根据设定容量信息限定PV子目录的容量；响应于监测到在目标工作节点中创建目标容器的请求消息，调用CSI将PV子目录挂载到目标工作节点的存储卷目录上；将存储卷目录绑定至目标容器。本公开实施例的技术方案可以为NFS存储服务的CSI存储限制容量大小，并且可以动态扩容。

Description

限定容器容量的方法及装置、电子设备、存储介质
技术领域
本公开涉及计算机技术领域，具体而言，涉及一种限定容器容量的方法、限定容器容量的装置、电子设备以及计算机可读存储介质。
背景技术
Kubernetes(简称K8s)是开源的容器集群管理系统，可以用来创建多个容器，每个容器中可以运行一个应用实例，能够提供应用部署、维护、扩展机制等功能，具有可移植、可扩展和自动化的特点。
Kubernetes可以通过NFS(Network File System，网络文件系统)服务进行数据存储，NFS存储方式可以包括in-tree(树内)、flexvolume插件存储和CSI(Container StorageInterface，容器存储接口)存储等。但受NFS协议的限制，当多个用户使用同一个NFS服务器挂载容器时，若某一个用户挂载的容器占用了大量的存储空间，则很容易影响其他用户的使用。
需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开实施例的目的在于提供一种限定容器容量的方法、限定容器容量的装置、电子设备以及计算机可读存储介质，进而至少在一定程度上克服相关技术中多个容器挂载于同一个NFS服务上时各容器的存储空间容易受其他容器影响的问题。
本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
根据本公开实施例的第一方面，提供了一种限定容器容量的方法，应用于容器集群管理平台Kubernetes，所述限定容器容量的方法包括：
响应于监测到创建容器持久存储卷PV的声明信息，调用容器存储接口CSI将网络文件系统NFS服务器的共享目录挂载到目标工作节点的容器组中，并在所述共享目录下创建PV子目录，所述声明信息中包括所述容器PV的设定容量信息；
通过所述CSI向所述NFS服务器发送容量请求，所述容量请求用于指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量；
响应于监测到在所述目标工作节点中创建目标容器的请求消息，调用所述CSI将所述PV子目录挂载到所述目标工作节点的存储卷目录上；
将所述存储卷目录绑定至所述目标容器。
在本公开的一些示例实施例中，基于前述方案，所述NFS服务器中包括守护进程Agent，所述NFS服务器通过所述Agent与所述CSI通信；在所述响应于监测到创建容器持久存储卷PV的声明信息之前，所述限定容器容量的方法还包括：
将所述NFS服务器中挂载所述共享目录的磁盘格式化为新一代文件系统XFS格式；
启动所述Agent。
在本公开的一些示例实施例中，基于前述方案，所述向所述NFS服务器发送容量请求包括：
向所述NFS服务器中的所述Agent发送容量请求；
所述容量请求用于指示所述NFS服务器中的所述Agent根据所述容量信息设置所述PV子目录的容量。
在本公开的一些示例实施例中，基于前述方案，在向所述NFS服务器中的所述Agent发送容量请求之后，所述限定容器容量的方法还包括：
响应于所述Agent完成根据所述设定容量信息设置所述PV子目录的容量，卸载所述容器组中挂载的所述共享目录。
在本公开的一些示例实施例中，基于前述方案，所述指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量包括：
指示所述NFS服务器为所述PV子目录挂载一个满足所述设定容量信息的逻辑卷管理LVM设备。
在本公开的一些示例实施例中，基于前述方案，在所述响应于监测到创建容器持久存储卷PV的声明信息之前，所述限定容器容量的方法还包括：
根据创建容器PV的创建操作生成所述声明信息。
在本公开的一些示例实施例中，基于前述方案，所述根据创建容器PV的创建操作生成所述声明信息包括：
响应于在所述Kubernetes上配置YAML格式配置文件的配置操作，生成YAML配置文件，所述YAML配置文件中包括所述声明信息。
根据本公开实施例的第二方面，提供了一种限定容器容量的装置，应用于容器集群管理平台Kubernetes，所述限定容器容量的装置包括：
调用模块，用于响应于监测到创建容器持久存储卷PV的声明信息，调用容器存储接口CSI将网络文件系统NFS服务器的共享目录挂载到目标工作节点的容器组中，并在所述共享目录下创建PV子目录，所述声明信息中包括所述容器PV的设定容量信息；
发送模块，用于通过所述CSI向所述NFS服务器发送容量请求，所述容量请求用于指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量；
挂载模块，用于响应于监测到在所述目标工作节点中创建目标容器的请求消息，调用所述CSI将所述PV子目录挂载到所述目标工作节点的存储卷目录上；
绑定模块，用于将所述存储卷目录绑定至所述目标容器。
根据本公开实施例的第三方面，提供了一种电子设备，包括：处理器；以及存储器，所述存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现上述任意一项所述的限定容器容量的方法。
根据本公开实施例的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据上述任意一项所述的限定容器容量的方法。
本公开实施例提供的限定容器容量的方法，可以应用于容器集群管理平台Kubernetes，当监测到创建容器PV(PersistentVolume，持久存储卷)的声明信息时，可以调用CSI将NFS服务器的共享目录挂载到目标工作节点的容器组中并在该共享目录下创建PV子目录，然后通过CSI向NFS服务器发送容量请求以指示NFS服务器根据声明信息中的设定容量信息限定PV子目录的容量；当监测到在目标工作节点中创建目标容器的请求消息时，可以调用CSI将PV子目录挂载到目标工作节点的存储卷目录上，然后将存储卷目录绑定至目标容器中，目标容器便可以使用NFS服务器存储，且使用的存储容量会受到设定容量信息的限制。根据本公开实施例的方案，一方面，NFS服务器作为Kubernetes的存储设备时，可以根据创建的容器PV的声明信息中的设定容量信息限定目标容器可使用的存储空间，避免了对其他容器存储空间的影响；另一方面，若需要扩充容器PV的容量，只需要通过Kubernetes更新容器PV的声明信息中的设定容量信息，便可以向NFS服务器申请重新为PV子目录设置相应的容量，实现PV容量的动态扩容，且不影响容器的正常运行和使用。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1示意性示出了相关技术中Kubernetes使用NFS的CSI存储方式存储数据的基本结构示意图；
图2示意性示出了根据本公开的一些实施例的一种限定容器容量的方法流程的示意图；
图3示意性示出了根据本公开的一些实施例的限定容器容量的方法的原理框图；
图4示意性示出了根据本公开的一些示例实施例的另一种限定容器容量的方法的流程的示意图；
图5示意性示出了根据本公开的一些实施例的限定容器容量的装置的示意图；
图6示意性示出了根据本公开的一些实施例的电子设备的结构示意图；
图7示意性示出了根据本公开的一些实施例的计算机可读存储介质的示意图。
在附图中，相同或对应的标号表示相同或对应的部分。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。
此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本公开的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本公开的各方面。
此外，附图仅为示意性图解，并非一定是按比例绘制。附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
Kubernetes是开源的一个容器集群管理平台，是一种容器编排工具，可以包括主节点Master和工作节点Node，每个工作节点Node上可以包括容器组Pod，一个Pod中可以包含一个或多个容器；每个主控节点或工作节点可以是一台物理机或虚拟机，可以作为网络连接端点，比如可以是处理器、控制器或工作站等。
例如，图1示意性示出了相关技术中Kubernetes使用NFS的CSI存储方式存储数据的基本结构示意图，参照图1所示，以Kubernetes中包括主节点Master 110和一个工作节点Node 120为例，工作节点Node 120中可以部署CSI插件和节点代理Kubele。Kubelet可以作为主节点Master 110的代理，负责监测工作节点Node 120的运行状态并维持工作节点Node120上的所有容器，提供Kuberntes运行时的环境。对于多个工作节点的场景，每个工作节点上均运行Kubelet。主节点Master 110可以通过其Kube控制管理器指示Kubelet处理容器内的应用程序，指示容器的启动和停止等。主节点Master 110可以通过调用CSI使用NFS服务器130的存储服务。
NFS服务器作为容器的存储设施时，当多个用户使用同一个NFS服务器挂载容器时，会在NFS服务器提供的共享目录上为每个容器挂载的PV创建一个子目录，但是，受NFS协议的限制，若某一个用户挂载的容器PV占用了大量的存储空间，则很容易影响其他用户挂载的容器的使用。
基于此，在本公开实施例的方案中，可以在共享目录下创建PV子目录后，通过CSI向NFS服务器发送容量请求，NFS服务器接收到该容量请求后可以根据声明信息中的设定容量信息为创建的PV子目录设置相应大小的容量，之后，创建目标容器时，可以调用CSI将该PV子目录挂载到目标工作节点的存储卷目录上，然后将该存储卷目录绑定至目标容器中，目标容器便可以使用NFS服务器的存储服务，且能够使用的存储空间会受到设定容量的限制。
在本公开示例实施例中，首先提供了一种限定容器容量的方法，该限定容器容量的方法可以应用于Kubernetes中，例如可以应用于运行Kubernetes的终端设备中，该终端设备比如可以是手机、电脑、服务器等电子设备。图2示意性示出了根据本公开的一些实施例的限定容器容量的方法流程的示意图。参考图2所示，该限定容器容量的方法可以包括以下步骤S210～步骤S240。
在步骤S210中，响应于监测到创建容器PV的声明信息，调用CSI将NFS服务器的共享目录挂载到目标工作节点的容器组中，并在共享目录下创建PV子目录，声明信息中包括容器PV的设定容量信息。
在Kubernetes中，CSI(也可以称为CSI插件)主要包括两部分：CSI控制服务模块CSI-Controller-server和CSI节点服务模块CSI-Node-server。
当监测到为目标工作节点创建容器PV的声明信息时，Kubernetes可以调用CSI中的CSI-Controller-server将NFS服务器的共享目录挂载到目标工作节点的容器组Pod中，并在该共享目录下创建PV子目录，比如采用mkdir(make directory，创建目录)命令在共享目录下创建PV子目录。其中的声明信息中可以包括容器PV的设定容量信息，通过该设定容量信息可以限定容器PV的容量，也即限定容器PV的存储空间大小。该声明信息中还可以包括PV的名称、CSI的标识信息和NFS服务器的服务地址与共享目录信息等。
在步骤S220中，通过CSI向NFS服务器发送容量请求，容量请求用于指示NFS服务器根据设定容量信息限定PV子目录的容量。
Kubernetes调用CSI将NFS服务器的共享目录挂载到目标工作节点的Pod中并在共享目录下创建PV子目录之后，通过CSI向NFS服务器发送容量请求，在该容量请求中携带容器PV的设定容量信息。NFS服务器接收到该容量请求之后，可以根据设定容量信息限定PV子目录的容量。
在本公开的一种示例实施例中，NFS服务器中可以包括守护进程Agent，NFS服务器可以通过该Agent与CSI进行通信，具体的，NFS服务器可以通过该Agent与CSI中的CSI-Controller-server进行通信。在创建容器持久存储卷PV的声明信息之前，可以将NFS服务器中挂载共享目录的磁盘格式化为XFS(X File System，新一代文件系统)格式，同时启动Agent。相应的，Kubernetes通过调用CSI中的CSI-Controller-server向NFS服务器中的该Agent发送容量请求，该Agent在接收到该容量请求之后，根据该容量请求中携带的设定容量信息将PV子目录的容量设置为该设定容量信息所指定的大小，比如可以通过xfs_quota指令对PV子目录限制容量大小。在Agent成功设置PV子目录的容量之后，可以向CSI返回限定容量成功消息，这时，CSI-Controller-server可以卸载Pod中挂载的共享目录。
在本公开的另一种示例实施例中，NFS服务器接收到CSI-Controller-server发送的容量请求之后，可以根据该容量请求中携带的设定容量信息为PV子目录挂载一个满足该设定容量信息的LVM(Logical Volume Manager，逻辑卷管理)设备，通过该LVM设备可以对磁盘分区进行管理，限定PV子目录的容量。示例性的，NFS服务器中可以包括守护进程Agent，NFS服务器可以通过该Agent与CSI进行通信；Kubernetes可以通过调用CSI中的CSI-Controller-server向NFS服务器中的该Agent发送容量请求，Agent在接收到该容量请求之后，可以根据容量请求中携带的设定容量信息为PV子目录挂载一个满足该设定容量信息的LVM设备。在Agent成功设置PV子目录的容量之后，可以向CSI返回限定容量成功消息，这时，CSI-Controller-server可以卸载Pod中挂载的共享目录。
在步骤S230中，响应于监测到在目标工作节点中创建目标容器的请求消息，调用CSI将PV子目录挂载到目标工作节点的存储卷目录上。
当用户通过Kubernetes在目标工作节点中创建目标容器挂载PV子目录时，Kubernetes可以根据监测到的请求消息调用CSI的CSI-Node-server将该PV子目录挂载到该目标工作节点中Kubelet根目录下的Pod的存储卷目录上。
在步骤S240中，将存储卷目录绑定至目标容器。
Kubelet创建目标容器时可以将存储卷目录绑定至目标容器内，此时，目标容器便可通过挂载有PV子目录的存储卷目录来使用NFS服务器提供的存储服务，且能够使用的存储空间大小会受到所挂载的PV子目录容量的限制，从而避免了使用目标容器时对其他容器存储空间的影响。
根据本示例实施例中的限定容器容量的方法，一方面，NFS服务器作为Kubernetes的存储设备时，可以根据创建的容器PV的声明信息中的设定容量信息限定目标容器可使用的存储空间，避免了对其他容器存储空间的影响；另一方面，若需要扩充容器PV的容量，只需要通过Kubernetes更新容器PV的声明信息中的设定容量信息，便可以向NFS服务器申请重新为PV子目录设置相应的容量，实现PV容量的动态扩容，且不影响容器的正常运行和使用。
基于图2对应示例实施例的限定容器容量的方法，下面对本公开示例实施例中的限定容器容量的方法进行进一步的说明。
图3示意性示出了根据本公开的一些示例实施例的限定容器容量的方法的原理框图，参照图3所示，以Kubernetes中包括主节点Master 310、一个工作节点Node 320和NNFS服务器330为例，在工作节点Node 320中可以部署CSI插件321和Kubelet 322，Kubelet可以作为主节点Master310的代理，负责监测工作节点Node 320的运行状态，并确保工作节点Node 320上的所有容器都正常。需要说明的是，这里以一个工作节点为例进行说明，并不用于限定本公开，工作节点的数量可以是一个或多个，每个工作节点的工作原理均可以参照工作节点Node 320。
CSI插件321可以包括两部分：CSI控制服务模块CSI-Controller-server和CSI节点服务模块CSI-Node-server。CSI-Controller-server可以进行容器存储卷的管理，可以通过StatefulSet(有状态应用编排)控制器进行部署，其可以对接自动配置卷程序模块Provisioner，Provisioner可以监控PVC(PersistentVolumeClaim，持久存储卷声明)的变更，当Provisioner监测到PVC变更时，可以根据监测到的PVC触发CSI-Controller-server的创建卷程序CreateVolume创建容器PV，或触发CSI-Controller-server的卸载卷程序DeleteVolume卸载卷目录。CSI-Node-server可以对工作节点Node 320上的卷目录进行管理，可以部署为DaemonSet控制器，其可以对接节点驱动管理程序Node-driver-registrar，通过Node-driver-registrar接收Kubelet的调用，实现与工作节点Node 320相关的CSI接口，比如将卷目录挂载到容器内的目标路径或从容器中卸载卷目录等。
主节点Master 310中可以包括Kube控制管理器311、API(Application，应用程序接口)服务模块312和键值存储仓库etcd 313。Kube控制管理器311可以为用户提供容器编排功能，比如提供容器编排界面，用户可以通过该容器编排界面进行容器创建、部署、规划、更新或维护等编排操作。API服务模块312可以为Kube控制管理器311提供访问和控制工作节点Node 320的接口服务。etcd是一种开源的分布式键值存储系统，可以持久并可靠的存储集群的配置，在任意时间点都能提供集群的正确信息。
NFS服务器330中部署有守护进程Agent，可以通过该Agent与工作节点Node 320中的CSI插件321进行通信。
根据图3所示的原理框图，Provisioner通过API服务模块312监测到用户创建容器PV，则调用CSI插件321中的CSI控制服务模块CSI-Controller-server，CSI-Controller-server先将NFS服务器330中的共享目录挂载到Pod中，并在该共享目录下创建PV子目录，然后向NFS服务器330上的Agent发出容量请求，在该容量请求中携带设定容量信息，Agent接收到该容量请求后，可以通过容量限定指令xfs_quota对该PV子目录进行基于设定容量信息的容量大小限制，然后卸载共享目录。之后，Kubelet 322可以调用CSI插件321中的CSI节点服务模块CSI-Node-server，将共享目录下创建的PV子目录挂载到kubelet 322的存储卷目录上，后续创建目标容器时会再将kubelet 322的存储卷目录绑定挂载至目标容器中，目标容器就可以使用NFS存储器330提供的存储服务，且所能够使用的存储空间会受到容量大小限制。
基于此，图4示意性示出了根据本公开的一些示例实施例的另一种限定容器容量的方法的流程的示意图，参照图4所示，该限定容器容量的方法可以包括如下的步骤S401～步骤S411。
在步骤S401中，将NFS服务器中挂载共享目录的磁盘格式化为XFS格式。
XFS是一种高性能的日志文件系统，基于分配组的设计特点而能够跨越多个存储设备，具有可调整大小的能力。在本公开示例实施例中，可以通过Kubernetes将NFS服务器中挂载共享目录的磁盘格式化为XFS格式，同时设置一个挂载参数，这样便赋予了该共享目录限制子目录大小的能力，可以通过配置该挂载参数的值开启或关闭该能力。
在步骤S402中，启动NFS服务器中部署的Agent。
NFS服务器中部署有Agent，启动该Agent，可以通过该Agent与CSI插件进行通信，以及为NFS服务器中共享目录的子目录限定容量。
在步骤S403中，根据创建容器PV的创建操作生成PVC信息。
Kubernetes可以为用户提供创建容器PV的界面，用户可以通过该界面创建一个容器PV，并指定该容器PV的容量，同时指定NFS服务器对应的CSI插件以及NFS服务器所提供存储服务的服务地址和共享目录信息。
示例性的，Kubernetes提供的创建容器PV的界面可以是供用户编写YAML(YAMLAin't Markup Language，另一种标记语言，简称标言)配置文件的界面，用户可以通过编写容器PV的YAML配置文件生成PVC信息。响应于在Kubernetes上配置该YAML格式配置文件的配置操作，生成YAML配置文件，生成的YAML配置文件中包括了PVC信息。例如，在YAML配置文件中可以配置创建的容器PV的名称为v1，指定v1的容量capacity，同时指定NFS服务器对应的CSI插件的信息csi，以及配置NFS服务器所提供存储服务的服务地址server和共享目录share。
示例性的，Kubernetes提供的创建容器PV的界面可以是可视化的图形用户界面，在该界面上可以提供创建容器PV的控件、指定容器PV容量的控件、指定NFS服务器对应CSI插件的控件和配置NFS服务器所提供存储服务的服务地址的控件和配置共享目录信息的控件，用户可以通过这些控件完成相关配置，Kubernetes根据用户的配置操作生成PVC信息。
在步骤S404中，自动配置卷程序模块监测到创建PVC信息的事件时，触发CSI控制服务模块CSI-Controller-server的创建卷程序CreateVolume创建容器PV。
在步骤S405中，CSI控制服务模块CSI-Controller-server先将NFS的共享目录挂载到目标工作节点的容器组中，并在共享目录下创建一个PV子目录。
在步骤S406中，CSI控制服务模块CSI-Controller-server根据PVC信息中的设定容量信息向NFS服务器中的Agent发送容量请求。
在步骤S407中，Agent通过xfs_quota命令将PV子目录的容量设置为设定容量信息所指定的大小。
在步骤S408中，CSI控制服务模块CSI-Controller-server卸载容器组中挂载的共享目录。
Agent成功设置PV子目录的容量之后，可以向CSI-Controller-server发送限定容量成功消息，CSI-Controller-server接收到该限定容量成功消息后卸载容器组中挂载的共享目录。此时，完成PV子目录创建和容量限制。
在步骤S409中，响应于监测到在目标工作节点中创建目标容器的请求消息，CSI节点服务模块CSI-Node-server将PV子目录挂载到目标工作节点的存储卷目录上。
当用户创建目标容器挂载所创建的容器PV时，可以通过Kubernetes选定该容器PV，比如根据容器PV的命名进行选定，Kubernetes可以通过其代理Kubelet触发CSI-Node-server将NFS服务器共享目录下的相应PV子目录挂载到Kubelet根目录中相应容器组的存储卷目录上。
在步骤S410中，将存储卷目录绑定至目标容器。
Kubelet调用应用容器引擎Docker创建目标容器，会将存储卷目录绑定挂载至目标容器内，用户使用目标容器内挂载的该存储卷目录时便会被限制容量的使用。
在步骤S411中，响应于监测到更新容器PV的设定容量信息，根据更新后的设定容量信息重新限定PV子目录的容量。
当用户需要更新容器PV的存储卷大小，比如需要扩大存储卷的大小时，可以通过Kubernetes更新容器PV的设定容量信息。此时，CSI插件中的修改工具resizer可以监测到更新PVC的事件，触发CSI-Controller-server的扩容程序ControllerExpandVolume将NFS服务器的共享目录挂载到容器组内，然后根据用户更新后的设定容量信息向NFS服务器上的Agent发送容量请求，Agent可以通过xfs_quota命令重新为PV子目录设置相应大小的限定容量，随后，CSI-Controller-server卸载共享目录，完成容器的动态扩容，不会影响容器的正常运行和使用。
需要说明的是，尽管在附图中以特定顺序描述了本公开中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。
此外，在本示例实施例中，还提供了一种限定容器容量的装置，可以应用于容器集群管理平台Kubernetes。参照图5所示，该限定容器容量的装置500可以包括：调用模块510，用于响应于监测到创建容器持久存储卷PV的声明信息，调用容器存储接口CSI将网络文件系统NFS服务器的共享目录挂载到目标工作节点的容器组中，并在共享目录下创建PV子目录，声明信息中包括容器PV的设定容量信息；发送模块520，用于通过CSI向NFS服务器发送容量请求，容量请求用于指示NFS服务器根据设定容量信息限定PV子目录的容量；挂载模块530，用于响应于监测到在目标工作节点中创建目标容器的请求消息，调用CSI将PV子目录挂载到目标工作节点的存储卷目录上；绑定模块540，用于将存储卷目录绑定至目标容器。
在本公开的一种示例性实施例中，基于前述方案，NFS服务器中包括守护进程Agent，NFS服务器可以通过该Agent与CSI通信；限定容器容量的装置500还可以包括：格式化模块，用于将NFS服务器中挂载共享目录的磁盘格式化为XFS格式；启动模块，用于启动Agent。
在本公开的一种示例性实施例中，基于前述方案，发送模块520可以具体用于向NFS服务器中的Agent发送容量请求；该容量请求可以用于指示NFS服务器中的Agent根据容量信息设置PV子目录的容量。
在本公开的一种示例性实施例中，基于前述方案，限定容器容量的装置500还可以包括：卸载模块，用于响应于Agent完成根据设定容量信息设置PV子目录的容量，卸载容器组中挂载的共享目录。
在本公开的一种示例性实施例中，基于前述方案，容量请求可以具体用于指示NFS服务器为PV子目录挂载一个满足设定容量信息的逻辑卷管理LVM设备。
在本公开的一种示例性实施例中，基于前述方案，限定容器容量的装置500还可以包括：生成模块，用于根据创建容器PV的创建操作生成创建容器PV的声明信息。
在本公开的一种示例性实施例中，基于前述方案，生成模块可以具体用于响应于在Kubernetes上配置标言YAML格式的配置文件的配置操作，生成YAML配置文件，该YAML配置文件中包括创建容器PV的声明信息。
上述中限定容器容量的装置各模块的具体细节已经在对应的限定容器容量的方法中进行了详细的描述，因此此处不再赘述。
应当注意，尽管在上文详细描述中提及了限定容器容量的装置的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外，在本公开的示例性实施例中，还提供了一种能够实现上述限定容器容量的方法的电子设备。
所属技术领域的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施例、完全的软件实施例(包括固件、微代码等)，或硬件和软件方面结合的实施例，这里可以统称为“电路”、“模块”或“系统”。
下面参照图6来描述根据本公开的这种实施例的电子设备600。图6所示的电子设备600仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示，电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于：上述至少一个处理单元610、上述至少一个存储单元620、连接不同系统组件(包括存储单元620和处理单元610)的总线630、显示单元640。
其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元610执行，使得所述处理单元610执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施例的步骤。例如，所述处理单元610可以执行如图2中所示的步骤：步骤S210，响应于监测到创建容器PV的声明信息，调用CSI将NFS服务器的共享目录挂载到目标工作节点的容器组中，并在共享目录下创建PV子目录，声明信息中包括容器PV的设定容量信息；步骤S220，通过CSI向NFS服务器发送容量请求，容量请求用于指示NFS服务器根据设定容量信息限定PV子目录的容量；步骤S230，响应于监测到在目标工作节点中创建目标容器的请求消息，调用CSI将PV子目录挂载到目标工作节点的存储卷目录上；步骤S240，将存储卷目录绑定至目标容器。
存储单元620可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)621和/或高速缓存存储单元622，还可以进一步包括只读存储单元(ROM)623。
存储单元620还可以包括具有一组(至少一个)程序模块626的程序/实用工具624，这样的程序模块625包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线630可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备600也可以与一个或多个外部设备670(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备600交互的设备通信，和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口650进行。并且，电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器660通过总线630与电子设备600的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备600使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施例的描述，本领域的技术人员易于理解，这里描述的示例实施例可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施例的方法。
在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中，本公开的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施例的步骤。
参考图7所示，描述了根据本公开的实施例的用于实现上述限定容器容量的方法的程序产品700，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本公开的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、射频(RF)等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
此外，上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。
通过以上的实施例的描述，本领域的技术人员易于理解，这里描述的示例实施例可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本公开实施例的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种限定容器容量的方法，其特征在于，应用于容器集群管理平台Kubernetes，所述限定容器容量的方法包括：
响应于监测到创建容器持久存储卷PV的声明信息，调用容器存储接口CSI将网络文件系统NFS服务器的共享目录挂载到目标工作节点的容器组中，并在所述共享目录下创建PV子目录，所述声明信息中包括所述容器PV的设定容量信息；
通过所述CSI向所述NFS服务器发送容量请求，所述容量请求用于指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量；
响应于监测到在所述目标工作节点中创建目标容器的请求消息，调用所述CSI将所述PV子目录挂载到所述目标工作节点的存储卷目录上；
将所述存储卷目录绑定至所述目标容器。
2.根据权利要求1所述的限定容器容量的方法，其特征在于，所述NFS服务器中包括守护进程Agent，所述NFS服务器通过所述Agent与所述CSI通信；在所述响应于监测到创建容器持久存储卷PV的声明信息之前，所述限定容器容量的方法还包括：
将所述NFS服务器中挂载所述共享目录的磁盘格式化为新一代文件系统XFS格式；
启动所述Agent。
3.根据权利要求2所述的限定容器容量的方法，其特征在于，所述向所述NFS服务器发送容量请求包括：
向所述NFS服务器中的所述Agent发送容量请求；
所述容量请求用于指示所述NFS服务器中的所述Agent根据所述容量信息设置所述PV子目录的容量。
4.根据权利要求3所述的限定容器容量的方法，其特征在于，在向所述NFS服务器中的所述Agent发送容量请求之后，所述限定容器容量的方法还包括：
响应于所述Agent完成根据所述设定容量信息设置所述PV子目录的容量，卸载所述容器组中挂载的所述共享目录。
5.根据权利要求1所述的限定容器容量的方法，其特征在于，所述指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量包括：
指示所述NFS服务器为所述PV子目录挂载一个满足所述设定容量信息的逻辑卷管理LVM设备。
6.根据权利要求1所述的限定容器容量的方法，其特征在于，在所述响应于监测到创建容器持久存储卷PV的声明信息之前，所述限定容器容量的方法还包括：
根据创建容器PV的创建操作生成所述声明信息。
7.根据权利要求6所述的限定容器容量的方法，其特征在于，所述根据创建容器PV的创建操作生成所述声明信息包括：
响应于在所述Kubernetes上配置标言YAML格式的配置文件的配置操作，生成YAML配置文件，所述YAML配置文件中包括所述声明信息。
8.一种限定容器容量的装置，其特征在于，应用于容器集群管理平台Kubernetes，所述限定容器容量的装置包括：
调用模块，用于响应于监测到创建容器持久存储卷PV的声明信息，调用容器存储接口CSI将网络文件系统NFS服务器的共享目录挂载到目标工作节点的容器组中，并在所述共享目录下创建PV子目录，所述声明信息中包括所述容器PV的设定容量信息；
发送模块，用于通过所述CSI向所述NFS服务器发送容量请求，所述容量请求用于指示所述NFS服务器根据所述设定容量信息限定所述PV子目录的容量；
挂载模块，用于响应于监测到在所述目标工作节点中创建目标容器的请求消息，调用所述CSI将所述PV子目录挂载到所述目标工作节点的存储卷目录上；
绑定模块，用于将所述存储卷目录绑定至所述目标容器。
9.一种电子设备，其特征在于，包括：
处理器；以及
存储器，所述存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现如权利要求1至7中任一项所述的限定容器容量的方法。
10.一种计算机可读存储介质，其特征在于，存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的限定容器容量的方法。
CN202210126329.7A 2022-02-10 2022-02-10 限定容器容量的方法及装置、电子设备、存储介质 Pending CN114489512A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210126329.7A CN114489512A (zh) 2022-02-10 2022-02-10 限定容器容量的方法及装置、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210126329.7A CN114489512A (zh) 2022-02-10 2022-02-10 限定容器容量的方法及装置、电子设备、存储介质

Publications (1)

Publication Number Publication Date
CN114489512A true CN114489512A (zh) 2022-05-13

Family

ID=81479417

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210126329.7A Pending CN114489512A (zh) 2022-02-10 2022-02-10 限定容器容量的方法及装置、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN114489512A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114816272A (zh) * 2022-06-23 2022-07-29 江苏博云科技股份有限公司 Kubernetes环境下的磁盘管理系统
CN115993929A (zh) * 2022-05-20 2023-04-21 深圳市极米软件科技有限公司 存储设备管理方法、装置、电子设备和存储介质
CN116107515A (zh) * 2023-04-03 2023-05-12 阿里巴巴（中国）有限公司 存储卷挂载与访问方法、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019015288A1 (zh) * 2017-07-20 2019-01-24 中兴通讯股份有限公司 数据持久化处理的方法、装置、系统及可读存储介质
CN110941393A (zh) * 2019-10-31 2020-03-31 北京浪潮数据技术有限公司 一种基于逻辑卷管理的lv供应方法、装置、设备及介质
CN111338854A (zh) * 2020-05-25 2020-06-26 南京云信达科技有限公司 基于Kubernetes集群快速恢复数据的方法及系统
CN111913665A (zh) * 2020-07-30 2020-11-10 星辰天合（北京）数据科技有限公司 存储卷的挂载方法及装置、电子设备
CN111966305A (zh) * 2020-10-22 2020-11-20 腾讯科技（深圳）有限公司 持久卷分配方法、装置、计算机设备和存储介质
CN113504954A (zh) * 2021-07-08 2021-10-15 华云数据控股集团有限公司 调用CSI LVM Plugin插件、动态持久卷供应的方法、系统及介质
CN113641457A (zh) * 2021-08-20 2021-11-12 北京百度网讯科技有限公司 容器创建方法、装置、设备、介质及程序产品

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019015288A1 (zh) * 2017-07-20 2019-01-24 中兴通讯股份有限公司 数据持久化处理的方法、装置、系统及可读存储介质
CN110019081A (zh) * 2017-07-20 2019-07-16 中兴通讯股份有限公司 数据持久化处理方法、装置、系统及可读存储介质
CN110941393A (zh) * 2019-10-31 2020-03-31 北京浪潮数据技术有限公司 一种基于逻辑卷管理的lv供应方法、装置、设备及介质
CN111338854A (zh) * 2020-05-25 2020-06-26 南京云信达科技有限公司 基于Kubernetes集群快速恢复数据的方法及系统
CN111913665A (zh) * 2020-07-30 2020-11-10 星辰天合（北京）数据科技有限公司 存储卷的挂载方法及装置、电子设备
CN111966305A (zh) * 2020-10-22 2020-11-20 腾讯科技（深圳）有限公司 持久卷分配方法、装置、计算机设备和存储介质
CN113504954A (zh) * 2021-07-08 2021-10-15 华云数据控股集团有限公司 调用CSI LVM Plugin插件、动态持久卷供应的方法、系统及介质
CN113641457A (zh) * 2021-08-20 2021-11-12 北京百度网讯科技有限公司 容器创建方法、装置、设备、介质及程序产品

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
于涛: "Kubernets 1.4 新特性系列介绍——持久卷", Retrieved from the Internet <URL:http://www.dockinfo.net/2926.html> *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115993929A (zh) * 2022-05-20 2023-04-21 深圳市极米软件科技有限公司 存储设备管理方法、装置、电子设备和存储介质
CN115993929B (zh) * 2022-05-20 2023-09-05 深圳市极米软件科技有限公司 存储设备管理方法、装置、电子设备和存储介质
CN114816272A (zh) * 2022-06-23 2022-07-29 江苏博云科技股份有限公司 Kubernetes环境下的磁盘管理系统
CN114816272B (zh) * 2022-06-23 2022-09-06 江苏博云科技股份有限公司 Kubernetes环境下的磁盘管理系统
CN116107515A (zh) * 2023-04-03 2023-05-12 阿里巴巴（中国）有限公司 存储卷挂载与访问方法、设备及存储介质
CN116107515B (zh) * 2023-04-03 2023-08-18 阿里巴巴（中国）有限公司 存储卷挂载与访问方法、设备及存储介质

Similar Documents

Publication Publication Date Title
CN114489512A (zh) 限定容器容量的方法及装置、电子设备、存储介质
CN112947965B (zh) 容器化的服务更新方法和装置
EP3598301A1 (en) Cloud management platform, virtual machine management method, system thereof
CN111614490A (zh) 基于顶级容器集群对托管容器集群的管理系统及方法
CN105320578A (zh) 一种备份和恢复app的方法及装置
CN112214247B (zh) 一种系统启动方法以及相关设备
CN110262893B (zh) 配置镜像内存的方法、装置及计算机存储介质
CN111684437B (zh) 按时间顺序排序的错位更新键-值存储系统
CN110941393A (zh) 一种基于逻辑卷管理的lv供应方法、装置、设备及介质
CN112230857B (zh) 一种混合云系统、混合云盘申请方法和数据存储方法
CN108234551B (zh) 一种数据处理方法及装置
US11681585B2 (en) Data migration for a shared database
CN114371914A (zh) 容器ip地址配置方法、装置、存储介质及电子设备
EP4155942A2 (en) Method and apparatus for load testing, and corresponding storage medium
CN113110846A (zh) 一种环境变量的获取方法及装置
CN113312003B (zh) 一种基于Go语言的物理裸机磁盘存储管理方法
CN112152988B (zh) 用于异步nbmp请求处理的方法、系统以及计算机设备和介质
US11372627B2 (en) System and method for providing integrated development environment (IDE) for programmable software system
CN114116030A (zh) 操作系统的运行方法、装置、电子设备、存储介质
CN111385334B (zh) 一种数据配送方法、装置、设备及存储介质
CN112764729A (zh) 应用软件开发方法、装置、计算机设备及可读存储介质
CN114461228B (zh) 对象生成方法、装置、设备、系统及可读存储介质
CN114726719B (zh) 网元操作系统部署方法、装置、电子设备及存储介质
CN113791925B (zh) 内存映象文件的存储方法及装置
CN116501449B (zh) 云原生环境下对于容器文件的管理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination