WO2020103925A1 - 一种容器化虚拟网络功能的部署方法和装置 - Google Patents

一种容器化虚拟网络功能的部署方法和装置

Info

Publication number
WO2020103925A1
WO2020103925A1 PCT/CN2019/120229 CN2019120229W WO2020103925A1 WO 2020103925 A1 WO2020103925 A1 WO 2020103925A1 CN 2019120229 W CN2019120229 W CN 2019120229W WO 2020103925 A1 WO2020103925 A1 WO 2020103925A1
Authority
WO
WIPO (PCT)
Prior art keywords
containerized
vnfc
vnf
cre
request message
Prior art date
Application number
PCT/CN2019/120229
Other languages
English (en)
French (fr)
Inventor
夏海涛
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Publication of WO2020103925A1 publication Critical patent/WO2020103925A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45595—Network integration; Enabling network access in virtual machine instances

Definitions

  • the present application relates to the field of communications, and in particular to a method and device for deploying a containerized virtual network function.
  • Network function virtualization refers to the virtualization technology used by telecom network operators in the field of information technology (IT).
  • IT information technology
  • the standardization work of NFV mainly focuses on network services (NS), virtualized network functions (VNF) and virtual resource management and orchestration (MANagement and Orchestration, MANO), and is managed by the European Telecommunications Standards Association (European Telecommunications Standards)
  • the interface and architecture (IFA) working group of the NFV industry standard group under the Institute, ETSI) completes the function definition work within the MANO framework, and its functional architecture includes a network function virtualization orchestrator (NFVO) ) And virtualized network function manager (virtualized network function manager, VNFM), NFVO and VNFM work together to achieve VNF lifecycle management.
  • NFVO network function virtualization orchestrator
  • VNFM virtualized network function manager
  • VNFM performs consistent and indiscriminate lifecycle management of all virtualized network function components (VNFC) that make up VNF, that is, in the virtual machine (virtual machine) assigned to VNF , VM) Select an appropriate virtual machine in the resource pool, load the image of the VNFC onto the virtual machine, complete the configuration related to instantiation, and finally generate a VNFC instance.
  • VNFC virtualized network function components
  • the embodiments of the present application provide a containerized VNF deployment method and device.
  • VNFD virtualized network function descriptor
  • CRE container runtime environment
  • the containerized virtual network function VNF includes a container runtime environment CRE and a containerized virtual network function component VNFC.
  • the method includes:
  • the virtual network function manager VNFM receives the VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • VNFM obtains the relationship information between containerized VNFC and CRE according to the VNF instantiation request message, and determines the target CRE for containerized VNF deployment according to the relationship information;
  • the VNFM instantiates the target CRE, and sends the information of the first virtual machine resource allocated to the instantiated target CRE to the container manager corresponding to the target CRE, and the first virtual machine resource is managed by the container manager;
  • VNFM sends a software image load request message to the container manager.
  • the software image load request message is used by the container manager to load the containerized VNFC image into the container unit and arrange the container unit to the first virtual machine resource managed by the container manager.
  • the container unit is a container computing resource that carries a mirrored operation of a containerized VNFC;
  • the VNFM sends a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the deployment method of differentiated processing of containerized VNF by VNFM is realized, and the flexibility of containerized VNF deployment is enhanced.
  • the method before the VNFM instantiates the target CRE, the method further includes:
  • the VNFM receives the information of the second virtual machine resource allocated by the NFVO for the instantiated target CRE, and the information of the second virtual machine resource includes the identifier of the virtual machine.
  • the target CRE for containerized VNF deployment is determined according to the relationship information, including:
  • the VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD; VNFM is based on The VNF instantiation request message obtains the relationship information between containerized VNFC and CRE, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the VNFD identifier.
  • the VNF instantiation request message includes the deployment template identifier or the instantiation level identifier of the containerized VNF At least one item; VNFM obtains the relationship information between containerized VNFC and CRE according to the VNF instantiation request message, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template ID or the instantiation level ID.
  • the containerized virtual network function VNF includes a container runtime environment CRE and a containerized virtual network function component VNFC.
  • the CRE instance is deployed in the NFV infrastructure; :
  • the virtual network function manager VNFM receives the VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • VNFM obtains the relationship information between containerized VNFC and CRE according to the VNF instantiation request message, and determines the target CRE for containerized VNF deployment according to the relationship information;
  • VNFM sends the information of the first virtual machine resource allocated to the target CRE to the container manager corresponding to the target CRE, and the first virtual machine resource is managed by the container manager;
  • the VNFM sends a software image load request message to the container manager corresponding to the target CRE.
  • the software image load request message is used by the container manager to load the containerized VNFC image into the container unit, and arranges the container unit to the first position managed by the container manager.
  • the container unit is a container computing resource that runs the image of the containerized VNFC;
  • the VNFM sends a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the deployment method of differentiated processing of containerized VNF by VNFM is realized, and the flexibility of containerized VNF deployment is enhanced.
  • determining the target CRE for containerized VNF deployment based on the relationship information includes:
  • the VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD; VNFM is based on The VNF instantiation request message obtains the relationship information between containerized VNFC and CRE, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the VNFD identifier.
  • the VNF instantiation request message includes the deployment template identifier or the instantiation level identifier of the containerized VNF At least one item; VNFM obtains the relationship information between containerized VNFC and CRE according to the VNF instantiation request message, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template ID or the instantiation level ID.
  • a method for deploying a containerized virtual network function includes:
  • the container manager receives the first virtual machine resource information sent by the virtual network function manager VNFM;
  • the container manager receives the software image loading request message sent by VNFM;
  • the container manager loads the containerized VNFC image to the container unit according to the software image loading request message, and arranges the container unit onto the first virtual machine resource, where the container unit is a container computing resource that carries the containerized VNFC image operation;
  • the container manager receives the containerized VNFC instantiation request message sent by VNFM;
  • the containerization manager completes the instantiation of the containerized VNFC according to the request message of the containerized VNFC instantiation.
  • the method further includes:
  • the container manager sends a containerized VNFC instantiation response message to the VNFM.
  • a method for deploying a containerized virtual network function includes a container runtime environment CRE and a containerized virtual network function component VNFC.
  • the method includes:
  • the virtual machine network function manager VNFM receives the first virtual network function VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • VNFM obtains the relationship information between containerized VNFC and CRE according to the first VNF instantiation request message, and determines the target CRE for containerized VNF deployment according to the relationship information;
  • the VNFM receives the information of the first virtual machine resource sent by NFVO, and the information of the first virtual machine resource is the information of the virtual machine resource managed by the container manager allocated for instantiating the containerized VNFC;
  • VNFM sends the first virtual machine resource information to the container manager
  • the VNFM sends a first software image loading request message to the container manager.
  • the first software image loading request message is used by the container manager to load the containerized VNFC image deployed on the instantiated target CRE into the container unit and load the container
  • the unit is arranged on the first virtual machine resource managed by the container manager, where the container unit is a container computing resource that carries the image operation of the containerized VNFC;
  • the VNFM sends a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the deployment method of differentiated processing of containerized VNF by VNFM is realized, and the flexibility of containerized VNF deployment is enhanced.
  • determining the target CRE for containerized VNF deployment based on the relationship information includes:
  • the first VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD;
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to the first VNF instantiation request message, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the VNFD identifier.
  • the first VNF instantiation request message includes the deployment template identifier or instantiation level of the containerized VNF At least one item in the identifier; the VNFM obtains the relationship information between the containerized VNFC and the CRE according to the first VNF instantiation request message, including:
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template ID or the instantiation level ID.
  • the virtual machine network function manager VNFM receives the network function virtualization orchestrator NFVO Before the first virtual network function VNF instantiates the request message, the method further includes:
  • VNFM instantiates the target CRE.
  • the VNFM instantiates the target CRE, including:
  • the VNFM receives the second VNF instantiation request message sent by NFVO, and the second VNF instantiation request message includes the target CRE instance identifier;
  • the VNFM instantiates the target CRE instance identifier corresponding to the target CRE.
  • a method for deploying a containerized virtual network function includes:
  • the network function virtualization orchestrator NFVO sends the first virtual network function VNF instantiation request message to the virtual network function manager VNFM; the first VNF instantiation request message is used by the VNFM to obtain the target containerized runtime CRE deployed by the containerized VNF
  • NFVO allocates information of the first virtual machine resource to the instantiated containerized virtual network function component VNFC, and the first virtual machine resource is managed by the container manager;
  • VNF0 sends the first virtual machine resource information to VNFM.
  • the first virtual machine resource information is used by VNFM to load the containerized VNFC image deployed on the instantiated target CRE into the container unit and arrange the container unit into the container On the first virtual machine resource managed by the manager, the container unit is a container computing resource that runs the image of the containerized VNFC.
  • the deployment method of differentiated processing of containerized VNF by VNFM is realized, and the flexibility of containerized VNF deployment is enhanced.
  • the first VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD.
  • the first VNF instantiation request message includes at least one of a deployment template identifier or an instantiation level identifier of the containerized VNF.
  • the method further includes:
  • the NFVO sends a second VNF instantiation request message to the VNFM.
  • the second VNF instantiation request message includes the target CRE instance identifier, which is used to instantiate the target CRE corresponding to the target CRE instance identifier.
  • an apparatus having a function of implementing the virtual machine network function manager VNFM in the above method.
  • This function can be realized by hardware, and can also be realized by hardware executing corresponding software.
  • the hardware or software includes one or more modules corresponding to the above functions.
  • an apparatus having the function of implementing the network function virtualization orchestrator NFVO in the above method.
  • This function can be realized by hardware, and can also be realized by hardware executing corresponding software.
  • the hardware or software includes one or more modules corresponding to the above functions.
  • an apparatus having the function of implementing the container manager in the above method.
  • This function can be realized by hardware, and can also be realized by hardware executing corresponding software.
  • the hardware or software includes one or more modules corresponding to the above functions.
  • an apparatus in a ninth aspect, includes a processor and a memory.
  • the memory is used to store a program.
  • the processor is used to read and execute the program. When the program is executed, any possible implementation manner of the first aspect to the fifth aspect can be implemented. The method.
  • a computer program product containing instructions, which, when the computer program product runs on a computer, causes the computer to execute the method in any possible implementation manner of the first aspect to the fifth aspect.
  • a computer-readable storage medium is provided.
  • a computer program is stored on the computer-readable storage medium.
  • the computer program is executed by a processor, the method in any possible implementation manner of the first aspect to the fifth aspect is implemented. .
  • the relationship between the container runtime environment (CRE) and the containerized VNFC is added to the containerized runtime environment (CRE) of the container by adding the VNF in the VNF descriptor file (virtualized network function writer) Information, to further implement the deployment of containerized VNFs, the implementation of VNFM to differentiate containerized VNF deployment methods, and enhance the flexibility of containerized VNF deployment, that is, flexibility.
  • CRE container runtime environment
  • VNF descriptor file virtualized network function writer
  • FIG. 1 is a schematic diagram of an ETSI NFV MANO standard architecture provided by an embodiment of this application;
  • FIG. 2 is a schematic diagram of a deployment service case of a container service provided by an embodiment of the present application
  • FIG. 3 is a schematic diagram of an internal structure of a containerized VNF provided by an embodiment of the present application.
  • FIG. 4 is a schematic flowchart of a containerized VNF deployment method provided by an embodiment of the present application.
  • FIG. 5 is a schematic diagram of the internal structure of another containerized VNF provided by an embodiment of the present application.
  • FIG. 6 is a schematic flowchart of another containerized VNF deployment method provided by an embodiment of the present application.
  • FIG. 7 is a schematic flowchart of another containerized VNF deployment method provided by an embodiment of the present application.
  • FIG. 8 is a schematic flowchart of instantiation of a container operating environment in a containerized VNF deployment provided by an embodiment of the present application
  • VNFM 9 is a schematic structural diagram of a VNFM provided by an embodiment of the present application.
  • FIG. 10 is a schematic structural diagram of another container manager provided by an embodiment of the present application.
  • FIG. 11 is a schematic structural diagram of an NFVO provided by an embodiment of the present application.
  • FIG. 12 is a schematic structural diagram of an apparatus for deploying a containerized virtual network function provided by an embodiment of the present application.
  • Network function virtualization refers to telecom network operators borrowing from the virtualization technology in the field of information technology to decouple software and hardware implementation of some telecom network functions in common servers, switches and storage. In this way, network services (NS) can be deployed quickly and efficiently, while saving investment and operating costs.
  • Virtualization technology implements telecommunications network functions in software and can run on general-purpose server hardware. It can be migrated, instantiated, and deployed in different physical locations on the network as needed, without the need to install new equipment.
  • NFV Network-to-Network Interface
  • NFV interface and architecture group working group under the European Communications Standards Association completes the function definition within the framework of MANO. Its functional architecture is shown in the figure. 1 shown.
  • NFVO is used to implement network service descriptor (NSD), virtual network function forwarding graph (VNFFFG) management and processing, network service lifecycle management, and VNFM to achieve VNF lifecycle management And virtual resource management functions.
  • NSD network service descriptor
  • VNFFFG virtual network function forwarding graph
  • VNFM is used to implement VNF lifecycle management, including VNF instantiation, elastic scaling of VNF instances (including scaling Scaling out / up and scaling Scaling in / down), healing of VNF instances, and termination of VNF instances.
  • the virtual infrastructure manager (virtualised infrastructure manager, VIM) is responsible for infrastructure layer hardware resources, virtualization resource management (including reservation and allocation), virtual resource status monitoring and fault reporting, and providing virtualization resources for upper-layer applications. Pool.
  • Operations and business support systems refer to the operator's operation and maintenance system OSS / BSS.
  • the element manager performs traditional fault management (fault management), configuration management (configuration management), user management (account management), performance management (performance management) and security management (security management) of VNFs. Functions, where fault management, configuration management, user management, performance management and security management are referred to as FCAPS.
  • VNF virtualized network function
  • PNF physical network function
  • EPC nodes including mobility management entities (MME), Service gateway (serving gateway, SGW), packet data gateway (packet data, network, PGW), etc.
  • MME mobility management entities
  • SGW serving gateway
  • PGW packet data gateway
  • the functional behavior and state of network functions are not related to virtualization or not. NFV technical requirements hope that VNF and PNF have the same functional behavior and external interface.
  • VNF consists of one or more VNF components (VNFC) with lower functional levels. Therefore, a VNF can be deployed on multiple virtual machines (VMs), and each VM carries the function of a VNFC, and a VNF can also be deployed on a VM.
  • VNFC VNF components
  • NFV infrastructure is composed of hardware resources, virtual resources, and virtualization layers. From the perspective of VNF, the combination of virtualization layer and hardware resources is a complete entity that can provide the required virtual resources.
  • Containers are an operating system-level virtualization technology. Containers are short for container as a service (CaaS). CaaS is a specific type of platform as a service (PaaS) service. Containers use operating system isolation technologies, such as CGroup and NameSpace under Linux, to isolate different processes. Container technology is different from hardware virtualization technology (hypervisor) technology, it has no virtual hardware, and there is no operating system inside, only processes. It is precisely because of this feature of container technology that containers are lighter than virtual machines and more convenient to manage. In order to facilitate management, a set of common management operations are defined in the running state of the container, such as: start, stop, pause and delete, etc., to carry out unified life cycle management of the container.
  • Container Infrastructure Service can also be called a container service
  • container infrastructure service management Container Infrastructure Service or Management
  • container service management can also be called a container service. management.
  • the container service and container service management are both located in the PaaS layer, or can be independent of the PaaS layer to become the infrastructure service layer that serves the PaaS layer.
  • the container service can be directly invoked by VNF, and can also be invoked by public services or proprietary services (for example, PaaS services) invoked by VNF.
  • the registration and discovery functions of container services are placed in the management of container infrastructure services.
  • the basic goal of standardization is to integrate the functions of container service management into the NFV MANO architecture functions, and realize the life cycle management of containerized VNFs by NFV MANO.
  • the container service called by the VNF performs the corresponding life cycle management function.
  • the embodiments of the present application provide a method for deploying containerized VNFs.
  • VNFD virtual network function descriptor files
  • VDU Virtual Deployment Unit
  • the containerized VNF is divided into two parts: the container runtime environment and the containerized VNFC, the two components of VNF (respectively as different VNF components) are used by using VNFD
  • the VDU definitions in are instantiated, but there are different content definitions in their respective VDUs.
  • the container runtime environment (container runtime environment, CRE) is a program that creates and runs containers based on an image obtained online, such as Kubelet in the Kubernetes system.
  • the mirror image is a series of software files made in a certain format in a single file, similar to the ZIP package file, which can encapsulate all relevant information about the software operation.
  • the containerized VNF can be deployed in multiple container runtime environments, and each container runtime environment is managed by a corresponding container manager (CaaS Mgt).
  • the containerized VNFC encapsulates the containerized VNFC image, and in a specific container runtime environment, the corresponding container manager (CaaS) allocates the corresponding computing resources, storage resources, and network resources to the containerized VNFC image. Instantiation of VNFC.
  • the containerized VNFC may be called a container application (container application or application container), the container application runs on the container runtime environment, and the containerized VNFC image constitutes the container image.
  • the image of the container runtime environment is loaded into the virtual machine as part of the VM image.
  • the prerequisite for containerized VNF deployment through this embodiment is that the VNFD of the containerized VNF separately defines VDUs with different contents for the container environment and containerized VNFC.
  • swImageDesc specifies the image of the container runtime environment loaded into the virtual machine as part of the virtual machine (VM) image.
  • NFVI constraints specify constraints on the VM that loads the container runtime environment, such as the location and capacity of the VM.
  • VDU corresponding to containerized VNFC
  • swImageDesc specifies the image of the containerized VNFC (as the container image).
  • the container runtime environment constraint specifies the constraint on the containerized runtime environment CRE of the VNFC instance deployed using the VDU, for example: deploying the VNFC instance on the specified CRE.
  • the containerized VNF is divided into two parts: the container runtime environment CRE and the containerized VNFC, which can be understood as the containerized VNF is divided into two different VNFC, namely CRE and containerized VNFC, that is, CRE Also regarded as a kind of VNFC.
  • the containerized VNF deployment method is shown in Figure 4.
  • FIG. 4 is a schematic diagram of a containerized VNF deployment method provided by an embodiment of the present application. As shown in FIG. 4, the method may include the following steps:
  • the VNFM receives a VNF instantiation request message sent by NFVO.
  • VNFM receives the VNF instantiation request message sent by NFVO to request the deployment of containerized VNF.
  • the VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD, so that subsequent VNFM can obtain the relationship information between the containerized VNFC and the CRE from the VNF descriptor file.
  • the VNF instantiation request message includes at least one of a deployment template (deployment) of the containerized VNF or an instantiation level identifier, so that subsequent VNFM can obtain the relationship between the containerized VNFC and the CRE information.
  • deployment template deployment template of the containerized VNF
  • instantiation level identifier an instantiation level identifier
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, and determines the target CRE for the containerized VNF deployment according to the relationship information.
  • the VNFM determines the VNFD according to the VNFD identification and obtains the relationship information between the containerized VNFC and the CRE from the VNFD.
  • the VNFM when the VNF instantiation request message includes at least one of the deployment template identifier or the instantiation level identifier of the containerized VNF, the VNFM obtains the container according to at least one of the VNFM identifier or the instantiation level identifier The relationship between VNFC and CRE.
  • the relationship information between containerized VNFC and CRE includes information on which CREs containerized VNFC can be deployed, in other words, information on designated CREs where containerized VNFC can be deployed, for example, containerized VNFC can be deployed on Kubernetes , OpenShift, Azure and other CRE.
  • the containerized VNFC may be deployed on one or more CREs.
  • the VNFM instantiates the target CRE, and allocates the first virtual machine resource managed by the container manager to the instantiated target CRE.
  • VNFM After VNFM determines the target CRE, VNFM sends a virtual resource allocation request message to NFVO, and obtains the virtual machine resources allocated to the instantiated target CRE from VIM through NFVO, that is, the second virtual machine resources, including computing resources, storage resources, and network resources .
  • the VNFM receives the information of the second virtual machine resource allocated for the instantiated target CRE from the NFVO, and the information of the second virtual machine resource includes the identifier of the virtual machine.
  • VNFM initiates a software image loading request to VIM through NFVO, and loads the determined image of the target CRE onto the allocated virtual machine. VNFM completes the configuration of the target CRE instantiation, and finally completes the target CRE instantiation.
  • the VNFM allocates the first virtual machine resource managed by the container manager (CaaS Mgt) to the instantiated target CRE, and sends the information of the first virtual machine resource to the container manager (CaaS Mgt).
  • the VNFM sends the first virtual machine resource information to the container manager.
  • the information of the first virtual machine resource may include an identifier of at least one virtual machine allocated to the containerized VNFC.
  • the VNFM sends a software image loading request message to the container manager.
  • the software loading request message is used by the container manager to load the image of the containerized VNFC into the container unit and arrange the container unit onto the first virtual machine resource managed by the container manager to further complete the instantiation of the containerized VNFC.
  • the container unit is a container computing resource that carries the containerized VNFC image operation, that is, the image of the VNFC is loaded as a container image onto a group of container units (as computing resources), and these container units are nodes where they are located Resources (for example: virtual machine VM) are divided into smaller-sized computing resources.
  • Container units can be mapped to Kubernetes object "container groups" (Pod).
  • the container manager loads the image of the containerized VNFC deployed on the instantiated target CRE onto the first virtual machine resource.
  • the containerized VNFC image is loaded on the virtual machine corresponding to the information of the first virtual machine resource.
  • the VNFM sends a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to complete the instantiation of the containerized VNFC.
  • the container manager instantiates the containerized VNFC.
  • the instantiation of containerized VNFC is triggered by VNFM, and the instantiation of containerized VNFC is performed by the container manager. After the container manager completes the instantiation of the containerized VNFC, the containerized VNFC instantiation response message is returned to the VNFM.
  • the method may further include:
  • VNFM sends a response message of VNF instantiation to NFVO.
  • VNFM is triggered by VNFM for containerized VNF deployment.
  • the VNF instantiation request message received by VNFM may be sent by NFVO or may be EM. Sent over.
  • the VNFM instantiation request message received by VNFM is sent by the EM, then after completing the containerized VNF deployment, the VNFM sends a VNF instantiation response message to the EM to notify the EM to complete the deployment of the containerized VNF.
  • the CRE in the containerized VNF and the containerized VNFC are regarded as different VNFC, and the relationship information between the CRE and the containerized VNFC is added to the VNFD of the containerized VNF to Differentiating between different VNFC deployments enhances the flexibility of containerized VNF deployment, that is, the flexibility of containerized VNF deployment. At the same time, it improves the efficiency of containerized VNF deployment.
  • the embodiment of the present application also provides an internal structure of a containerized VNF, as shown in FIG. 5.
  • the containerized VNF shown in Figure 5 also divides the containerized VNF into two parts: the container runtime environment CRE and the containerized VNFC, but unlike Figure 3, in Figure 5, the CRE instance is pre-deployed in the network function virtualization infrastructure (network function virtualization infrastructure, NFVI), when receiving the containerized VNF instantiation request message, the containerized VNFC is instantiated directly to complete the instantiation process of the containerized VNF.
  • the specific process is shown in FIG. 6.
  • FIG. 6 is a schematic flowchart of another containerized VNF deployment method provided by an embodiment of the present application. The method includes the following steps:
  • the VNFM receives the VNF instantiation request message sent by NFVO.
  • VNFM receives the VNF instantiation request message sent by NFVO to request the deployment of containerized VNF.
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, and determines the target CRE for the containerized VNF deployment according to the relationship information.
  • the VNFM sends the information of the first virtual machine resource allocated to the instantiated target CRE to the container manager corresponding to the target CRE, where the first virtual machine resource is managed by the container manager corresponding to the target CRE.
  • the VNFM sends a software image loading request message to the container manager.
  • the container manager loads the image of the containerized VNFC deployed on the instantiated target CRE onto the first virtual machine resource.
  • the VNFM sends a containerized VNFC instantiation request message to the container manager to request the container manager to complete the instantiation of the containerized VNFC.
  • the container manager instantiates the containerized VNFC, and sends a response message of the containerized VNFC instantiation to the VNFM.
  • the method may further include:
  • the VNFM sends a response message of the VNF instantiation to the NFVO to notify the NFVO to complete the deployment of the containerized VNF.
  • S201 to S208 are the same as the descriptions of S101, S102, and S104 to S108 in FIG. 4, which are brief descriptions and will not be repeated here.
  • the embodiment of the present application also provides another method for deploying containerized VNF, as shown in FIG. 7.
  • the difference between the deployment method of the containerized VNF and FIG. 4 is that, in this embodiment, the CRE and the containerized VNFC in the containerized VNF are regarded as two different types of VNF, and the VNFDs of these two types of VNF are defined separately To specify the dependency relationship between the containerized VNFC deployment and the containerized runtime environment between VNFDs, that is, the relationship between containerized VNFC and CRE.
  • swImageDesc specifies the description of the VNF using software images (including the image of the container runtime environment). These software images are loaded into the virtual machine, called Virtual machine (VM) image.
  • VM Virtual machine
  • VNFD corresponding to containerized VNFC
  • DependentCreDescriptor specifies the constraints of the environment CRE on the VNFC instance container deployed with the VNFD, for example: deploying a containerized VNFC instance on the specified CRE .
  • the deployment of the containerized runtime environment and the deployment of the containerized VNFC are independent of each other.
  • the deployment of the containerized runtime environment is not related to the deployment of the containerized VNFC, where the deployment of the containerized runtime environment includes CRE Image loading and CRE instantiation.
  • VNFM no longer participates in the process of allocating virtual machine resources, this process is completed by NFVO.
  • the virtual machine resources here are allocated for the target CRE specified by the deployment of containerized VNFC.
  • the virtual machine resources allocated by NFVO are managed by the container manager (CaaS Mgt).
  • FIG. 7 is a schematic flowchart of another containerized VNF deployment method provided by an embodiment of the present application. As shown in FIG. 7, the method may include the following steps:
  • NFVO sends a first VNF instantiation request message to VNFM.
  • the first VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD, so that subsequent VNFM receives the first VNF instantiation request message and then from the VNFD identification Obtain the relationship information between containerized VNFC and CRE from the corresponding VNFD.
  • the first VNF instantiation request message includes at least one of the deployment template identifier or the instantiation level identifier of the containerized VNF, so that subsequent VNFM receives the first VNF instantiation request message Then, the relationship information between the containerized VNFC and the CRE is obtained according to at least one of the deployment template ID or the instantiation level ID.
  • the VNFM obtains the relationship information between the containerized VNFC and the CRE according to the first VNF instantiation request message, and determines the target CRE for the containerized VNF deployment according to the relationship information.
  • the VNFM when the first VNF instantiation request message includes the VNFD identifier of the containerized VNF, the VNFM reads the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the VNFD identifier, and further according to the correspondence between the VNFC and the CRE The relationship determines the target CRE for containerized VNF deployment.
  • the VNFM when the VNF instantiation request message includes at least one of the deployment template identifier or the instantiation level identifier of the containerized VNF, the VNFM obtains according to at least one of the deployment template identifier or the instantiation level identifier Information about the relationship between containerized VNFC and CRE.
  • the relationship information between the containerized VNFC and the CRE may be that the containerized VNFC is deployed on the specified one or more CREs, in other words, the specific containerized VNFC may be deployed on the specified one or more CREs, for example Containerized VNFC can be deployed on Kubernetes, OpenShift, Azure and other CREs.
  • the VNFM When the VNFM obtains the relationship information between the containerized VNFC and the CRE, it determines the target CRE in which the containerized VNFC can be deployed based on the relationship information.
  • the NFVO obtains information on allocating the first virtual machine resource managed by the container manager (CaaS Mgt) to the instantiated containerized VNFC.
  • NFVO sends a virtual resource allocation request to VIM, requesting VIM to allocate corresponding virtual machine resources for the instantiated containerized VNFC, including computing resources, storage resources, network resources, and the identification of at least one virtual machine allocated to the containerized VNFC; VIM obtains information about virtual machine resources.
  • the information of the virtual machine resource mentioned here is the information of the first virtual machine resource.
  • NFVO sends the first virtual machine resource information to VNFM.
  • the information of the first virtual machine resource includes a virtual machine identifier.
  • the resource information of the first virtual machine is sent to the container manager.
  • the identifier of the virtual machine is sent to the container manager, so that the corresponding virtual machine resource can be subsequently addressed according to the identifier of the virtual machine.
  • the VNFM sends the first virtual machine resource information to the container manager.
  • VNFM When receiving the information of the first virtual machine resource sent by NFVO, VNFM sends a first software image loading request message to the container manager to request that the containerized VNFC image deployed on the instantiated target CRE be loaded into the container unit And arrange the container unit on the first virtual machine resource managed by the container manager, in other words, arrange the container unit on the virtual machine corresponding to the identifier of the virtual machine.
  • the container unit is a container computing resource that carries a mirrored operation of the containerized VNFC.
  • the container manager loads the image of the containerized VNFC deployed on the instantiated target CRE onto the virtual machine.
  • the VNFM sends a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to complete the instantiation of the containerized VNFC.
  • the container manager instantiates the containerized VNFC.
  • the instantiation of containerized VNFC is triggered by VNFM, and the instantiation of containerized VNFC is performed by the container manager. After the container manager completes the instantiation of the containerized VNFC, the containerized VNFC instantiation response message is returned to the VNFM.
  • the method further includes:
  • the VNFM sends a VNF instantiation response message to the NFVO to notify the NFVO to complete the deployment of the containerized VNF.
  • the EM is triggered by the VNFM for containerized VNF deployment.
  • the EM sends a VNF instantiation request message to the VNFM.
  • the VNFM receives the VNF instantiation request message, the operations of S320 to S370 are performed.
  • the VNFM sends a response message of the VNF instantiation to the EM to notify the EM to complete the deployment of the containerized VNF.
  • the CRE in the containerized VNF and the containerized VNFC are regarded as different types of VNF, and the VNFD dependency relationship of the CRE is added to the VNFD of the containerized VNFC.
  • the differential deployment of CRE and containerized VNFC enhances the flexibility (flexibility) of containerized VNF deployment. At the same time, it improves the efficiency of containerized VNF deployment.
  • the method may further include:
  • VNFM instantiates the target CRE.
  • the process of instantiating the target CRE may include the following steps:
  • NFVO sends a second VNF instantiation request message to VNFM.
  • the second VNF instantiation request message includes the target CRE instance identifier.
  • the target CRE can be regarded as a kind of VNF.
  • NFVO allocates information of the second virtual machine resource to the target CRE.
  • NFVO After NFVO sends a second VNF instantiation request message to VNFM, it allocates virtual machine resources to the instantiated CRE.
  • the specific process is as follows: NFVO sends a virtual resource allocation request message to VIM for use by VIM after receiving the virtual resource request message.
  • the instantiated target CRE allocates virtual machine resources, that is, second virtual machine resources.
  • the information of the second virtual machine resource includes an identifier of at least one virtual machine allocated to the target CRE.
  • NFVO obtains the information of the virtual machine resources allocated by the VIM to the instantiated target CRE, and executes S403.
  • NFVO sends a second software image loading request message to VIM.
  • the second software image loading request message is used by the VIM to load the image of the target CRE onto the virtual machine corresponding to the identifier of the virtual machine.
  • VNFM completes the instantiation of the target CRE.
  • the VNFM sends a VNF instantiation response message to the NFVO to notify the NFVO to complete the deployment of the target CRE.
  • S402 and S403 may be executed before S401.
  • the VNFM receives the second VNF instantiation request message sent by the NFVO, the instantiation of the target CRE is performed.
  • the size of the sequence number of each process does not mean that the execution order is sequential, and the execution order of each process should be determined by its function and inherent logic, and should not correspond to the implementation process of the embodiment of the present invention Constitute any limitation.
  • FIG. 9 is a schematic structural diagram of an apparatus for deploying a containerized virtual network function provided by an embodiment of the present application.
  • the device is a VNFM used for the deployment of containerized VNF.
  • the containerized VNF includes a container runtime environment CRE and a containerized virtual network function component VNFC.
  • the apparatus may include a receiving unit 510, a processing unit 520, and a sending unit 530.
  • the receiving unit 510 is configured to receive a VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • the processing unit 520 is configured to obtain the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, and determine the target CRE for the containerized VNF deployment according to the relationship information;
  • the sending unit 530 is used to instantiate the target CRE and send the information of the first virtual machine resource allocated to the instantiated target CRE to the container manager corresponding to the target CRE, and the first virtual machine resource is managed by the container manager;
  • the sending unit 530 is also used to send a software image loading request message to the container manager.
  • the software image loading request message is used by the container manager to load the containerized VNFC image into the container unit, and arranges the container unit to the container manager.
  • the container unit is a container computing resource that runs the image of the containerized VNFC;
  • the sending unit 530 is further configured to send a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the receiving unit 510 is further configured to receive information about the second virtual machine resource allocated by the NFVO to the instantiated target CRE, and the information about the second virtual machine resource includes the identifier of the virtual machine.
  • the processing unit 520 determines the target CRE for containerized VNF deployment according to the relationship information, including:
  • the processing unit 520 determines one or more target CREs deployed by the containerized VNFC according to the relationship information.
  • the VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD; the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, including:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the identifier of the VNFD.
  • the VNF instantiation request message includes at least one of a containerized VNF deployment template identifier or an instantiation level identifier; the processing unit 520 obtains the containerized VNFC and CRE according to the VNF instantiation request message Relationship information, including:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template identifier or the instantiation level identifier.
  • An embodiment of the present invention also provides an apparatus for deploying a containerized virtual network function.
  • the apparatus is a VNFM for deploying a containerized VNF, where the VNF includes a container runtime environment CRE and containerized virtual Network function components VNFC and CRE instances are deployed in NFVI; each unit of the VNFM is used to perform the following operations:
  • the receiving unit 510 is configured to receive a VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • the processing unit 520 is configured to obtain the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, and determine the target CRE for the containerized VNF deployment according to the relationship information;
  • the sending unit 530 is configured to send the information of the first virtual machine resource allocated to the target CRE to the container manager corresponding to the target CRE, and the first virtual machine resource is managed by the container manager;
  • the sending unit 530 is also used to send a software image loading request message to the container manager corresponding to the target CRE.
  • the software image loading request message is used by the container manager to load the containerized VNFC image into the container unit and arrange the container unit to On the first virtual machine resource managed by the container manager, where the container unit is a container computing resource that carries the image operation of the containerized VNFC;
  • the sending unit 530 is further configured to send a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the processing unit 520 determines the target CRE for containerized VNF deployment according to the relationship information, including:
  • the processing unit 520 determines one or more target CREs deployed by the containerized VNFC according to the relationship information.
  • the VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD; the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to the VNF instantiation request message, including:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the identifier of the VNFD.
  • the VNF instantiation request message includes at least one of a containerized VNF deployment template identifier or an instantiation level identifier; the processing unit 520 obtains the containerized VNFC and CRE according to the VNF instantiation request message Relationship information, including:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template identifier or the instantiation level identifier.
  • the container manager includes a receiving unit 610 and a processing unit 620.
  • the receiving unit 610 is configured to receive the first virtual machine resource information sent by the virtual network function manager VNFM;
  • the receiving unit 610 is also used to receive a software image loading request message sent by VNFM;
  • the processing unit 620 is configured to load the containerized VNFC image to the container unit according to the software image loading request message, and arrange the container unit to the first virtual machine resource, where the container unit is a container that runs the containerized VNFC image operation Computing resources
  • the receiving unit 610 is also used to receive a containerized VNFC instantiation request message sent by VNFM;
  • the processing unit 620 is also used to complete the instantiation of the containerized VNFC according to the request message of the instantiation of the containerized VNFC.
  • the container manager further includes a sending unit 630, configured to send a containerized VNFC instantiation response message to the VNFM.
  • An embodiment of the present invention also provides an apparatus for deploying a containerized virtual network function.
  • the apparatus is a VNFM for deploying a containerized VNF, where the containerized VNF includes a container runtime environment CRE and a container Virtualized network function component VNFC.
  • Each unit of the VNFM is used to perform the following operations:
  • the receiving unit 510 is configured to receive a first virtual network function VNF instantiation request message sent by the network function virtualization orchestrator NFVO;
  • the processing unit 520 is configured to obtain the relationship information between the containerized VNFC and the CRE according to the first VNF instantiation request message, and determine the target CRE for the containerized VNF deployment according to the relationship information;
  • the receiving unit 510 is further configured to receive the information of the first virtual machine resource sent by NFVO.
  • the information of the first virtual machine resource is information of the virtual machine resource managed by the container manager allocated for instantiating the containerized VNFC;
  • the sending unit 530 is configured to send the first virtual machine resource information to the container manager
  • the sending unit 530 is further configured to send a first software image loading request message to the container manager.
  • the first software image loading request message is used by the container manager to load the containerized VNFC image deployed on the instantiated target CRE into the container
  • the container unit is arranged on the first virtual machine resource managed by the container manager, where the container unit is a container computing resource that carries the image operation of the containerized VNFC;
  • the sending unit 530 is further configured to send a containerized VNFC instantiation request message to the container manager.
  • the containerized VNFC instantiation request message is used by the container manager to perform the instantiation of the containerized VNFC.
  • the processing unit 520 determines the target CRE for containerized VNF deployment according to the relationship information, including:
  • the processing unit 520 determines one or more target CREs deployed by the containerized VNFC according to the relationship information.
  • the first VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD; the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to the first VNF instantiation request message, include:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE from the VNFD corresponding to the identifier of the VNFD.
  • the first VNF instantiation request message includes at least one of the deployment template identifier or the instantiation level identifier of the containerized VNF; the processing unit 520 obtains the container according to the first VNF instantiation request message Relationship information between VNFC and CRE, including:
  • the processing unit 520 obtains the relationship information between the containerized VNFC and the CRE according to at least one of the deployment template identifier or the instantiation level identifier.
  • the processing unit 520 is also used to instantiate the target CRE.
  • the processing unit 520 instantiates the target CRE, including:
  • the receiving unit 510 is further configured to receive a second VNF instantiation request message sent by NFVO.
  • the second VNF instantiation request message includes a target CRE instance identifier; a processing unit 520, instantiates the target CRE corresponding to the target CRE instance identifier.
  • FIG. 11 is a device for deploying a containerized virtual network function provided by an embodiment of the present application.
  • the device is a network function virtualization orchestrator NFVO.
  • the NFVO may include a sending unit 710 and a distribution unit 720.
  • the sending unit 710 is configured to send a first virtual network function VNF instantiation request message to the virtual network function manager VNFM; the first VNF instantiation request message is used by the VNFM to obtain the target containerized runtime CRE of the containerized VNF deployment;
  • the allocation unit 720 is configured to allocate information of the first virtual machine resource to the instantiated containerized virtual network function component VNFC, and the first virtual machine resource is managed by the container manager;
  • the sending unit 710 is also used to send the first virtual machine resource information to the VNFM, and the first virtual machine resource information is used by the VNFM to load the containerized VNFC image deployed on the instantiated target CRE into the container unit, and
  • the container unit is arranged on the first virtual machine resource managed by the container manager, and the container unit is a container computing resource that carries the image operation of the containerized VNFC.
  • the first VNF instantiation request message includes the identifier of the containerized VNF descriptor file VNFD.
  • the first VNF instantiation request message includes at least one of a deployment template identifier or an instantiation level identifier of the containerized VNF.
  • the sending unit 710 is further configured to send a second VNF instantiation request message to the VNFM, and the second VNF instantiation request message includes a target CRE instance identifier for instantiating the target CRE instance Identify the corresponding target CRE.
  • An embodiment of the present application further provides a device for deploying a containerized virtual network function.
  • the device is suitable for devices that can deploy container technology, and is not limited to a central processing unit (CPU).
  • the apparatus may include: a memory 810 and a processor 820.
  • the memory 810 may be connected to the processor 820 through a bus.
  • the memory 810 may be a non-volatile memory, such as a hard disk drive and a flash memory, and the memory 810 has a software program and a device driver.
  • the software program can perform various functions of the methods performed by the VNFC, the container manager, and the NFVO in FIGS. 4, 6, 7, and 8 of the present application; the device driver may be a network and interface driver.
  • the memory 810 is used to store programs.
  • the processor 820 is used to execute a software program. When the program is being executed, the method executed by the VNFC, the container manager, and the NFVO in FIGS. 4, 6, 6, and 8 can be implemented.
  • An embodiment of the present application also provides a computer program product containing instructions, which, when the computer program product runs on a computer, causes the computer to execute the operations of VNFC, container manager, and NFVO in FIG. 4, FIG. 6, FIG. 7, and FIG. 8. method.
  • Embodiments of the present application also provide a computer-readable storage medium, where a computer program is stored on the computer-readable storage medium.
  • a computer program is stored on the computer-readable storage medium.
  • the computer program is executed by a processor, the VNFC and container management in FIGS. 4, 6, 7, and 8 are implemented. And the method performed by NFVO.
  • the present invention may be implemented in whole or in part by software, hardware, firmware, or any combination thereof.
  • software it can be implemented in whole or in part in the form of a computer program product.
  • the computer program product includes one or more computer instructions. When the computer program instructions are loaded and executed on the computer, all or part of the processes or functions according to the embodiments of the present invention are generated.
  • the computer may be a general-purpose computer, a dedicated computer, a computer network, or other programmable devices.
  • the computer instructions may be stored in a computer-readable storage medium or transmitted from one computer-readable medium to another computer-readable medium, for example, the computer instructions may be from a website site, computer, server, or data center via wired (For example, coaxial cable, optical fiber, digital subscriber line (Digital Subscriber Line, DSL)) or wireless (for example, infrared, wireless, microwave, etc.) to another website, computer, server, or data center.
  • the computer-readable storage medium may be any available medium that can be accessed by a computer or a data storage device including a server, a data center, and the like integrated with one or more available media.
  • the usable medium may be a magnetic medium (for example, a floppy disk, a hard disk, a magnetic tape), an optical medium (for example, a DVD), or a semiconductor medium (for example, a Solid State Disk (SSD)) or the like.
  • a magnetic medium for example, a floppy disk, a hard disk, a magnetic tape
  • an optical medium for example, a DVD
  • a semiconductor medium for example, a Solid State Disk (SSD)

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Stored Programmes (AREA)

Abstract

本申请实施例提供了一种容器化虚拟网络功能(VNF)的部署方法和装置，该方法包括将容器化VNF划分为容器运行时环境CRE和容器化VNFC，并维护容器化VNFC与容器运行时环境CRE的关系信息，以便于进行容器化VNF部署时，VNFM对容器化VNF的组成部分进行有差异的部署，增强了容器化VNF部署的灵活性。

Description

一种容器化虚拟网络功能的部署方法和装置
本申请要求于2018年11月23日提交中国专利局、申请号为201811408649.1、申请名称为“一种容器化虚拟网络功能的部署方法和装置”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本申请涉及通信领域，尤其涉及一种容器化虚拟网络功能的部署方法和装置。
背景技术
网络功能虚拟化(network function virtualization，NFV)是指电信网络运营商借鉴了信息技术(information technology，IT)领域的虚拟化技术。NFV的标准化工作主要集中在网络服务(network service,NS),虚拟网络功能(virtualized network functions，VNF)和虚拟资源的管理和编排(MANagement and Orchestration，MANO)，由欧洲通信标准协会(European Telecommunications Standards Institute，ETSI)下NFV行业标准组的接口与架构组(interface and architecture，IFA)工作组完成MANO框架内的功能定义工作，其功能架构中包括网络功能虚拟化编排器(network function virtualization orchestrator，NFVO)和虚拟网络功能管理器(virtualized network function manager，VNFM)，NFVO和VNFM共同配合实现VNF的生命周期管理。
在VNF生命周期管理过程中，VNFM对组成VNF的所有虚拟化网络功能组件(virtualized network function component，VNFC)进行一致的、无差别的生命周期管理，也就是在分配给VNF的虚拟机(virtual machine，VM)资源池中选择一个适当的虚拟机，将该VNFC的镜像加载到该虚拟机上，完成实例化相关的配置，最终生成一个VNFC实例。但这种处理方式不适用于容器化VNF各组成部分弹性、有差异的部署的需求。
发明内容
本申请实施例提供了一种容器化VNF的部署方法和装置，通过在VNF的描述符文件(virtualized network function descriptor，VNFD)中增加VNF对容器运行时环境(container runtime Environment,CRE)和容器化VNFC的关系信息，来实现VNFM对容器化VNF的组成部分进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
第一方面，提供了一种容器化虚拟网络功能的部署方法，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；该方法包括：
虚拟网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
VNFM实例化目标CRE，并将分配给实例化的目标CRE的第一虚拟机资源的信息发送给目标CRE对应的容器管理器，第一虚拟机资源由容器管理器管理；
VNFM向容器管理器发送软件镜像加载请求消息，软件镜像加载请求消息用于容器管理器 将容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
VNFM向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
结合第一方面，在第一方面的第一种可能实现的方式中，在VNFM实例化目标CRE之前，该方法还包括：
VNFM接收NFVO为实例化目标CRE分配的第二虚拟机资源的信息，第二虚拟机资源的信息包括虚拟机的标识。
结合第一方面，在第一方面的第二种可能实现的方式中，根据关系信息确定容器化VNF部署的目标CRE，包括：
根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
结合第一方面或者第一方面的第一种可能实现的方式，在第一方面的第三种可能实现的方式中，VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
结合第一方面或者第一方面的第一种可能实现的方式，在第一方面的第四种可能实现的方式中，VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项；VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
第二方面，提供了一种容器化虚拟网络功能的部署方法，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC，CRE实例部署在NFV基础设施中；该方法包括：
虚拟网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
VNFM将分配给目标CRE的第一虚拟机资源的信息发送给目标CRE对应的容器管理器，第一虚拟机资源由容器管理器管理；
VNFM向目标CRE对应的容器管理器发送软件镜像加载请求消息，软件镜像加载请求消息用于容器管理器将容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
VNFM向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
结合第二方面，在第二方面的第一种可能实现的方式中，根据关系信息确定容器化VNF部署的目标CRE，包括：
根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
结合第一方面或者第一方面的第一种可能实现的方式，在第一方面的第二种可能实现的方式中，VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
结合第一方面或者第一方面的第一种可能实现的方式，在第一方面的第三种可能实现的方式中，VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项；VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
第三方面，提供了一种容器化虚拟网络功能的部署方法，该方法包括：
容器管理器接收虚拟网络功能管理器VNFM发送的第一虚拟机资源的信息；
容器管理器接收VNFM发送的软件镜像加载请求消息；
容器管理器根据软件镜像加载请求消息将容器化VNFC的镜像加载到容器单元，并将容器单元编排到第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
容器管理器接收VNFM发送的容器化VNFC实例化的请求消息；
容器化管理器根据容器化VNFC实例化的请求消息完成容器化VNFC的实例化。
结合第三方面，在一种可能的实现中，该方法还包括：
容器管理器向VNFM发送容器化VNFC实例化的应答消息。
第四方面，提供了一种容器化虚拟网络功能的部署方法，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；该方法包括：
虚拟机网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息；
VNFM根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
VNFM接收NFVO发送的第一虚拟机资源的信息，第一虚拟机资源的信息是为实例化容器化VNFC分配的由容器管理器管理的虚拟机资源的信息；
VNFM向容器管理器发送第一虚拟机资源的信息；
VNFM向容器管理器发送第一软件镜像加载请求消息，第一软件镜像加载请求消息用于容器管理器将部署在实例化的目标CRE上的容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
VNFM向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
结合第四方面，在第四方面的第一种可能实现的方式中，根据关系信息确定容器化VNF部署的目标CRE，包括：
根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
结合第四方面或者第四方面的第一种可能实现的方式，在第四方面的第二种可能实现的方式中，第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；VNFM根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
结合第四方面或者第四方面的第一种可能实现的方式，在第四方面的第三种可能实现的方式中，第一VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的 至少一项；VNFM根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
VNFM根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
结合第四方面，或者第四方面的上述任一可能实现的方式，在第四方面的第四种可能实现的方式中，在虚拟机网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息之前，该方法还包括：
VNFM实例化目标CRE。
结合第四方面的第四种可能实现的方式，在第四方面的第五种可能实现的方式中，VNFM实例化目标CRE，包括：
VNFM接收NFVO发送的第二VNF实例化请求消息，第二VNF实例化请求消息包括目标CRE实例标识；
VNFM实例化所述目标CRE实例标识对应的目标CRE。
第五方面，提供了一种容器化虚拟网络功能的部署方法，该方法包括：
网络功能虚拟化编排器NFVO向虚拟网络功能管理器VNFM发送第一虚拟网络功能VNF实例化请求消息；第一VNF实例化请求消息用于VNFM获取容器化VNF部署的目标容器化运行时CRE；
NFVO为实例化容器化虚拟网络功能组件VNFC分配第一虚拟机资源的信息，第一虚拟机资源由容器管理器管理；
VNF0向VNFM发送第一虚拟机资源的信息，第一虚拟机资源的信息用于VNFM将部署在实例化的目标CRE上的容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，容器单元是承载容器化VNFC的镜像运行的容器计算资源。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
结合第五方面，在第五方面的第一种可能实现的方式中，第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识。
结合第五方面，在第五方面的第二种可能实现的方式中，第一VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项。
结合第五方面，或者第五方面的上述任一可能实现的方式，在第五方面第三种可能实现的方式中，该方法还包括：
NFVO向VNFM发送第二VNF实例化请求消息，第二VNF实例化请求消息包括目标CRE实例标识，用于实例化目标CRE实例标识对应的目标CRE。
第六方面，提供了一种装置，该装置具有实现上述方法中虚拟机网络功能管理器VNFM的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第七方面，提供了一种装置，该装置具有实现上述方法中网络功能虚拟化编排器NFVO的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第八方面，提供了一种装置，该装置具有实现上述方法中容器管理器的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第九方面，提供了一种装置，装置包括处理器和存储器，存储器用于存储程序，处理器用于读取执行程序，程序执行时，能够实现第一方面至第五方面任一可能实现的方式中的方 法。
第十方面，提供了一种包含指令的计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行第一方面至第五方面任一可能实现的方式中的方法。
第十一方面，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现第一方面至第五方面任一可能实现的方式中的方法。
基于提供的一种容器化VNF的部署方法和装置，通过在VNF的描述符文件(virtualized network function descriptor，VNFD)中增加VNF对容器运行时环境(container runtime Environment,CRE)和容器化VNFC的关系信息，进一步实现容器化VNF的部署，实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性，即灵活性。
附图说明
图1是本申请实施例提供的一种ETSI NFV MANO标准架构示意图；
图2是本申请实施例提供的一种容器服务的部署用例示意图；
图3是本申请实施例提供的一种容器化VNF的内部结构示意图；
图4是本申请实施例提供的一种容器化VNF的部署方法流程示意图；
图5是本申请实施例提供的另一种容器化VNF的内部结构示意图；
图6是本申请实施例提供的另一种容器化VNF的部署方法流程示意图；
图7是本申请实施例提供的另一种容器化VNF的部署方法流程示意图；
图8是本申请实施例提供的一种容器化VNF部署中容器运行环境实例化的流程示意图；
图9是本申请实施例提供的一种VNFM的结构示意图；
图10是本申请实施例提供的另一种容器管理器的结构示意图；
图11是本申请实施例提供的一种NFVO的结构示意图；
图12是本申请实施例提供的一种容器化虚拟网络功能部署的装置结构示意图。
具体实施方式
网络功能虚拟化(network function virtualization，NFV)是指电信网络运营商借鉴了信息技术领域的虚拟化技术，在通用的服务器、交换机和存储器中将部分电信网络功能的实现进行软件和硬件解耦，从而实现网络服务(network service，NS)快速、高效部署，同时达到节省投资成本和运营成本。虚拟化技术将电信网络功能以软件方式实现，并能在通用的服务器硬件上运行，可以根据需要进行迁移、实例化、部署在网络的不同物理位置，并且不需要安装新设备。
NFV的标准化工作主要集中在网路服务、虚拟网络功能和虚拟资源的管理和编排，由欧洲通信标准协会下的NFV接口与架构组工作组完成MANO框架内的功能定义工作，其功能架构如图1所示。
NFVO用于实现网络服务描述符(network service descriptor，NSD)，虚拟网络功能转发图(VNF forwarding graph，VNFFG)的管理和处理，网络服务生命周期的管理，以及与VNFM配合实现VNF的生命周期管理和虚拟资源的管理功能。
VNFM用于实现VNF的生命周期管理，包括VNF的实例化、VNF实例的弹性伸缩(包括扩容Scaling out/up和缩容Scaling in/down)、VNF实例的治愈(healing)以及VNF实例的终止。
虚拟基础设施管理器(virtualised infrastructure manager，VIM)用于负责基础设施层硬件资源，虚拟化资源的管理(包括预留和分配)，虚拟资源状态的监控和故障上报，面向上层应用提供虚拟化资源池。
运营和商务支撑系统(operations and business support systems，OSS/BSS)指运营商的运行维护系统OSS/BSS。
网元管理器(element manager，EM)对VNF进行传统的故障管理(fault management)、配置管理(configuration management)、用户管理(account management)、性能管理(performance management)和安全管理(security management)的功能，其中，故障管理、配置管理、用户管理、性能管理和安全管理简称FCAPS。
虚拟化网络功能(virtualized network function，VNF)对应于传统非虚拟化网络中的物理网络功能(physical network function，PNF)，如虚拟化的EPC节点(包括移动管理实体(mobility management entity，MME)，服务网关(serving gateway，SGW)，分组数据网关(packet data network，PGW)等)。网络功能的功能性行为和状态与虚拟化与否无关，NFV技术需求希望VNF和PNF拥有相同的功能性行为和外部接口。
VNF由一个或多个更低功能级别的VNF组件(VNF Component，VNFC)组成。因此，一个VNF可以部署在多个虚拟机(virtual machine，VM)上，每个VM承载一个VNFC的功能，VNF也可以部署在一个VM上。
NFV基础架构(NFV infrastructure，NFVI)由硬件资源和虚拟资源以及虚拟化层组成。从VNF的角度来说，虚拟化层和硬件资源结合起来是一个能够提供所需虚拟资源的完整实体。
容器是一种操作系统级别的虚拟化技术。容器是容器即服务(container as a service，CaaS)的简称，CaaS是一种特定类型的平台即服务(platform as a service，PaaS)服务。容器通过操作系统隔离技术，如Linux下的CGroup和NameSpace，将不同的进程隔离开。容器技术不同于硬件虚拟化(hypervisor)技术，它没有虚拟硬件，其内部也没有操作系统，只有进程。正是由于容器技术的这个特点，使得容器相比虚拟机更轻量，管理也更方便。为了方便管理，在容器的运行态，定义了一组公共的管理操作，例如：启动、停止、暂停和删除等，对容器进行统一的生命周期管理。
ETSI NFV标准中容器服务的部署用例如图2所示，其中，容器基础设施服务(Container Infrastructure Service)也可以称为容器服务，容器基础设施服务管理(Container Infrastructure Service Management)也可以称为容器服务管理。在图2的部署用例中，容器服务和容器服务管理都位于PaaS层，或者可以独立于PaaS层之外成为服务PaaS层的基础设施服务层。容器服务可以被VNF直接调用，也可以被VNF所调用的公共服务或专有服务(例如：PaaS服务)所调用。容器服务的注册和发现功能被置于容器基础设施服务管理中，标准化的基本目标是将容器服务管理的功能融合到NFV MANO架构功能中，实现NFV MANO对容器化VNF进行生命周期管理时对该VNF所调用的容器服务进行相应的生命周期管理的功能。
上文描述了NFV MANO的标准架构和容器服务部署用例，下面对本申请实施例提供的容器化VNF的部署方法进行描述。
为了适应容器化VNF弹性部署的需求，本申请实施例提供了一种容器化VNF的部署方法，通过在容器化VNF的虚拟网络功能描述符文件(VNF descriptor，VNFD)中增加对不同VNF组件的部署模板(Virtual Deployment Unit,VDU)进行差异化描述，来实现VNFM对容器化VNF的组成部分进行差异化处理的部署，以增强容器化VNF部署的弹性。
在本申请的一个实施例中，如图3所示，将容器化VNF分成两部分：容器运行时环境和容器化VNFC,VNF这两个组成部分(分别作为不同的VNF组件)都通过使用VNFD中的VDU定义进行实例化，但在各自的VDU中有不同的内容定义。容器运行时环境(container runtime environment，CRE)是基于在线获取的镜像(image)来创建和运行容器的程序，例如Kubernetes系统中Kubelet。其中，镜像是一系列软件文件按照一定的格式制作的单一文件，类似于ZIP包文件，可以封装软件运行所有的相关信息。容器化VNF可以部署在多个容器运行时环境中，每个容器运行时环境都有相应的容器管理器(CaaS Mgt)进行管理。
容器化VNFC中封装了容器化VNFC镜像，并在特定的容器运行时环境中，由对应的容器管理器(CaaS Mgt)为容器化VNFC镜像分配相应的计算资源、存储资源和网络资源，最终完成VNFC的实例化。
其中，容器化VNFC可以称为容器应用(container application或application container)，容器应用运行在容器运行时环境上，容器化VNFC镜像构成容器镜像。容器运行时环境的镜像加载到虚拟机中是VM镜像的一部分。
通过该实施例进行容器化VNF部署的前提条件是：在容器化VNF的VNFD中分别针对容器进行时环境和容器化VNFC定义内容有差别的VDU。
在容器运行时环境对应的VDU定义中，增强了属性为软件镜像描述swImageDesc和NFVI约束的描述。其中，swImageDesc指定加载到虚拟机的容器运行时环境的镜像，作为虚拟机(VM)镜像的一部分。NFVI约束指定对加载容器运行时环境的VM的约束，例如：VM的位置、容量等。
在容器化VNFC对应的VDU定义中，增强了属性为软件镜像描述swImageDesc和容器运行时环境约束(CRE constraint)的描述。其中，swImageDesc指定容器化VNFC的镜像(作为容器镜像)。容器运行时环境约束指定对使用该VDU部署的VNFC实例容器化运行时环境CRE的约束，例如：在指定的CRE上部署VNFC实例。
在该实施例中，将容器化VNF分成两部分：容器运行时环境CRE和容器化VNFC，可以理解为将容器化VNF分为两种不同的VNFC，即CRE和容器化VNFC，也就是将CRE也看作是一种VNFC。在这种情况下，容器化VNF部署的方法如图4所示。
需要说明的是，在下文中的“第一”和“第二”只是为了区分消息或信息，对消息或信息的本身不作限定。
图4是本申请实施例提供的一种容器化VNF的部署方法示意图。如图4所示，该方法可以包括以下步骤：
S101，VNFM接收NFVO发送的VNF实例化请求消息。
VNFM接收由NFVO发送的VNF实例化请求消息，以请求容器化VNF的部署。
可选地，在一个实施例中，该VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识，以便于后续VNFM从该VNF描述符文件获取容器化VNFC与CRE的关系信息。
可选地，在另一个实施例中，VNF实例化请求消息包括容器化VNF的部署模板(deployment flavor)或者实例化等级标识中的至少一项，以便于后续VNFM获取容器化VNFC与CRE的关系信息。
S102，VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE。
在一个实施例中，当VNF实例化请求消息中包括容器化VNF的VNFD的标识时，VNFM根据VNFD的标识确定VNFD，并从VNFD中获取容器化VNFC与CRE的关系信息。
在另一个实施例中，当VNF实例化请求消息中包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项时，VNFM根据VNFM标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
其中，容器化VNFC与CRE的关系信息包括容器化VNFC可以部署在哪些CRE上的信息，换句话讲，指定容器化VNFC可以部署在哪些指定的CRE的信息，例如容器化VNFC可以部署在Kubernetes,OpenShift,Azure等CRE上。
可选地，在一个实施例中，容器化VNFC可以部署在一个或者多个CRE上。
S103，VNFM实例化目标CRE，并为实例化的目标CRE分配由容器管理器管理的第一虚拟机资源。
在VNFM确定目标CRE后，VNFM向NFVO发送虚拟资源分配请求消息，并通过NFVO从VIM获取为实例化目标CRE分配的虚拟机资源，即第二虚拟机资源，包括计算资源，存储资源和网络资源。VNFM从NFVO接收为实例化目标CRE分配的第二虚拟机资源的信息，第二虚拟机资源的信息包括虚拟机的标识。VNFM通过NFVO向VIM发起软件镜像加载请求，将所确定的目标CRE的镜像加载到分配的虚拟机上。VNFM完成目标CRE实例化的相关配置，最终完成目标CRE的实例化。
完成目标CRE实例化后，VNFM为实例化的目标CRE分配由容器管理器(CaaS Mgt)管理的第一虚拟机资源，并将第一虚拟机资源的信息发送给容器管理器(CaaS Mgt)。
S104，VNFM向容器管理器发送第一虚拟机资源的信息。该第一虚拟机资源的信息可以包括分配给容器化VNFC的至少一个虚拟机的标识。
S105，VNFM向容器管理器发送软件镜像加载请求消息。
软件加载请求消息用于容器管理器将容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，以进一步完成容器化VNFC的实例化。其中，容器单元是承载所述容器化VNFC镜像运行的容器计算资源，即：将VNFC的镜像作为容器镜像加载到一组容器单元(作为计算资源)上，这些容器单元是对其所处的节点资源(例如：虚拟机VM)进行切分的更小颗粒的计算资源。容器单元可以映射为Kubernetes对象“容器组”(Pod)。
S106，容器管理器将部署在该实例化的目标CRE上的容器化VNFC的镜像加载到第一虚拟机资源上。
也就是将容器化VNFC镜像加载在第一虚拟机资源的信息对应的虚拟机上。
S107，VNFM向容器管理器发送容器化VNFC实例化的请求消息。
容器化VNFC实例化的请求消息用于容器管理器完成容器化VNFC的实例化。
S108，容器管理器实例化容器化VNFC。
在该实施例中，由VNFM触发容器化VNFC的实例化，由容器管理器执行完成容器化VNFC的实例化。容器管理器完成容器化VNFC的实例化后，向VNFM返回容器化VNFC实例化的应答消息。
可选地，在该实施例中，如图4所示，该方法还可以包括：
S109，VNFM向NFVO发送VNF实例化的应答消息。
可选地，在该实施例中，触发VNFM进行容器化VNF部署的还有可能是EM，换句话讲，VNFM接收到的VNF实例化请求消息可以是由NFVO发送过来的，也有可能是EM发送过来的。当VNFM接收到的VNF实例化请求消息是由EM发送的时，那么在完成容器化VNF部署后，VNFM向EM发送VNF实例化的应答消息，通知EM完成容器化VNF的部署。
采用该实施例提供的容器化VNF的部署方法，通过将容器化VNF中的CRE和容器化VNFC看作不同的VNFC，并在容器化VNF的VNFD中增加CRE和容器化VNFC的关系信息，以对不同的VNFC部署进行区分，增强了容器化VNF部署的弹性，即容器化VNF部署的灵活性。同时提高了容器化VNF部署的效率。
本申请实施例还提供了一种容器化VNF的内部结构，如图5所示。图5所示的容器化VNF也是将容器化VNF分成两部分：容器运行时环境CRE和容器化VNFC，但与图3不同的是，图5中，CRE实例预先部署在网络功能虚拟化基础设施(network function virtualization infrastructure，NFVI)中，当接收到容器化VNF实例化请求消息时直接进行容器化VNFC的实例化，以完成容器化VNF的实例化过程，其具体过程如图6所示。
图6是本申请实施例提供的另一种容器化VNF的部署方法流程示意图。该方法包括以下步骤：
S201，VNFM接收NFVO发送的VNF实例化请求消息。
VNFM接收由NFVO发送的VNF实例化请求消息，以请求容器化VNF的部署。
S202，VNFM根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE。
S203，VNFM将分配给实例化的目标CRE的第一虚拟机资源的信息发送给目标CRE对应的容器管理器，其中，第一虚拟机资源由目标CRE对应的容器管理器管理。
S204，VNFM向容器管理器发送软件镜像加载请求消息。
S205，容器管理器将部署在该实例化的目标CRE上的容器化VNFC的镜像加载到第一虚拟机资源上。
S206，VNFM向容器管理器发送容器化VNFC实例化的请求消息，以请求容器管理器完成容器化VNFC的实例化。
S207，容器管理器实例化容器化VNFC，并向VNFM发送容器化VNFC实例化的应答消息。
可选地，在该实施例中，如图4所示，该方法还可以包括：
S208，VNFM向NFVO发送VNF实例化的应答消息，以通知NFVO以完成容器化VNF的部署。
在该实施例中容器化VNF部署的过程中，因为预先将CRE部署在NFVI中，因此在图5中没有对应图4中S103实例化目标CRE的步骤，除此外，图5中的其他的步骤：S201至S208与图4中的S101、S102、S104至S108的描述相同，为简洁描述，在此不再赘述。
本申请实施例还提供了另一种容器化VNF的部署方法，如图7所示。该容器化VNF的部署方法与图4的区别在于，在该实施例中，将容器化VNF中的CRE和容器化VNFC看作是两类不同的VNF，对这两类VNF的VNFD分别进行定义，在VNFD之间指定容器化VNFC的部署对容器化运行时环境的依赖关系，即容器化VNFC与CRE的关系信息。
在容器运行时环境对应的VNFD定义中，增强了属性为swImageDesc的功能描述，其中，swImageDesc指定VNF使用软件镜像(包括容器运行时环境的镜像)的描述，这些软件镜像加载到虚拟机，称为虚拟机(VM)镜像。
在容器化VNFC对应的VNFD定义中，新增了属性为DependentCreDescriptor的功能描述，DependentCreDescriptor指定对使用该VNFD部署的VNFC实例容器进行时环境CRE的约束，例如：在指定的CRE上部署容器化VNFC实例。
此外，容器化运行时环境的部署与容器化VNFC的部署相互独立，换句话讲，容器化运行时环境的部署与容器化VNFC的部署不相关，其中，容器化运行时环境的部署包括CRE镜像加载和CRE实例化。而且VNFM不再参与分配虚拟机资源的过程，这个过程改由NFVO来完成。这里的虚拟机资源是为部署容器化VNFC指定的目标CRE分配的。NFVO分配的虚拟机资源由容器管理器(CaaS Mgt)进行管理。
图7是本申请实施例提供的另一种容器化VNF的部署方法流程示意图。如图7所示，该方法可以包括以下步骤：
S301，NFVO向VNFM发送第一VNF实例化请求消息。
可选地，在一个实施例中，该第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识，以便于后续VNFM接收到第一VNF实例化请求消息后，根据VNFD的标识从对应的VNFD中获取容器化VNFC与CRE的关系信息。
可选地，在另一个实施例中，第一VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项，以便于后续VNFM接收到第一VNF实例化请求消息后，根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
S302，VNFM根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE。
在一个实施例中，当第一VNF实例化请求消息中包括容器化VNF的VNFD标识时，VNFM从VNFD标识对应的VNFD中读取容器化VNFC与CRE的关系信息，进一步根据VNFC与CRE的对应关系确定容器化VNF部署的目标CRE。
在另一个实施例中，当VNF实例化请求消息中包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项时，VNFM根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
其中，容器化VNFC与CRE的关系信息可以是容器化VNFC部署在指定的一个或者多个CRE上，换句话讲，是特定的容器化VNFC可以部署在指定的一个或多个CRE上，例如容器化VNFC可以部署在Kubernetes,OpenShift,Azure等CRE上。
当VNFM获取到容器化VNFC与CRE的关系信息时，根据该关系信息确定容器化VNFC所能部署在的目标CRE。
S303，NFVO获取为实例化容器化VNFC分配由容器管理器管理(CaaS Mgt)的第一虚拟机资源的信息。
NFVO向VIM发送虚拟资源分配请求，请求VIM为实例化的容器化VNFC分配相应的虚拟机资源，包括计算资源，存储资源，网络资源，以及分配给容器化VNFC的至少一个虚拟机的标识；从VIM获取虚拟机资源的信息。这里讲的虚拟机资源的信息即第一虚拟机资源的信息。
S304，NFVO向VNFM发送第一虚拟机资源的信息。
其中，第一虚拟机资源的信息包括虚拟机标识。以用于VNFM接收到第一虚拟机资源的信息后，将第一虚拟机的资源信息发送给容器管理器。换句话讲，以用于VNFM接收到虚拟机的标识后，将虚拟机的标识发送给容器管理器，以便于后续根据虚拟机的标识寻址对应的虚拟机资源。
S305，VNFM向容器管理器发送第一虚拟机资源的信息。
S306，VNFM向容器管理器发送第一软件镜像加载请求消息。
当VNFM接收到NFVO发送的第一虚拟机资源的信息时，向容器管理器发送第一软件镜像加载请求消息，以请求将部署在实例化的目标CRE上的容器化VNFC镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，换句话讲，将容器单元编排到虚拟机的标识对应的虚拟机上。其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源。
S307，容器管理器将部署在实例化目标CRE上的容器化VNFC的镜像加载到虚拟机上。
S308，VNFM向容器管理器发送容器化VNFC实例化的请求消息。
容器化VNFC实例化的请求消息用于容器管理器完成容器化VNFC的实例化。
S309，容器管理器实例化容器化VNFC。
在该实施例中，由VNFM触发容器化VNFC的实例化，由容器管理器执行完成容器化VNFC的实例化。容器管理器完成容器化VNFC的实例化后，向VNFM返回容器化VNFC实例化的应答消息。
可选地，在该实施例中，如图7所示，该方法还包括：
S310，VNFM向NFVO发送VNF实例化的应答消息，以通知NFVO完成容器化VNF的部署。
可选地，在该实施例中，触发VNFM进行容器化VNF部署的还可以是EM，换句话讲，EM向VNFM发送VNF实例化请求消息。当VNFM接收到VNF实例化请求消息时，执行S320至S370的操作，完成S370中容器化VNFC的实例化后，VNFM向EM发送VNF实例化的应答消息，以通知EM完成容器化VNF的部署。
采用该实施例提供的容器化VNF的部署方法，通过将容器化VNF中的CRE和容器化VNFC看作不同类型的VNF，并在容器化VNFC的VNFD中增加CRE对应的VNFD的依赖关系，针对CRE和容器化VNFC进行差异化部署，增强了容器化VNF部署的弹性(灵活性)。同时提高了容器化VNF部署的效率。
可选地，在该实施例中，如图7所示，在NFVO或EM向VNFM发送第一VNF实例化请求消息之前，该方法还可以包括：
VNFM实例化目标CRE。
在图7中，执行S301至S310之前，已经完成了目标CRE的实例化，且在容器化VNF的VNFD中设置了容器化VNFC与目标CRE的关系信息。
可选地，在一个实施例中，实例化目标CRE的具体过程如图8所示。如图8所示，实例化目标CRE的过程可以包括以下步骤：
S401，NFVO向VNFM发送第二VNF实例化请求消息。
以请求VNFM完成目标CRE的实例化。第二VNF实例化请求消息包括目标CRE实例标识。在该实施例中，可以将目标CRE看作是一种VNF。
S402，NFVO为目标CRE分配第二虚拟机资源的信息。
NFVO向VNFM发送第二VNF实例化请求消息后，为实例化CRE分配虚拟机资源，其具体过程是：NFVO向VIM发送虚拟资源分配请求消息，以用于VIM接收到虚拟资源请求消息后， 为实例化目标CRE分配虚拟机资源，即第二虚拟机资源。第二虚拟机资源的信息包括至少一个分配给目标CRE的虚拟机的标识。
NFVO获取VIM为实例化目标CRE分配的虚拟机资源的信息，并执行S403。
S403，NFVO向VIM发送第二软件镜像加载请求消息。
第二软件镜像加载请求消息用于VIM将目标CRE的镜像加载到虚拟机的标识对应的虚拟机上。
S404，VNFM完成目标CRE的实例化。
完成S402和S403，且接收到NFVO发送的第二VNF实例化请求消息后，执行目标CRE的实例化。完成目标CRE的实例化后执行S405。
S405，VNFM向NFVO发送VNF实例化的应答消息，以通知NFVO完成目标CRE的部署。
在该实施例中，S402和S403可以在S401之前执行。当VNFM接收到NFVO发送的第二VNF实例化请求消息时，执行目标CRE的实例化。
需要说明的是，在该实施例中，各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
图4、图6、图7和图8对容器化VNF的部署方法进行了描述，下面结合符图9、图10和图12对本申请实施例提供的装置进行描述。
图9是本申请实施例提供的一种容器化虚拟网络功能部署的装置结构示意图。该装置是VNFM用于容器化VNF的部署，其中，容器化VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC。如图9所示，该装置可以包括接收单元510、处理单元520和发送单元530。
接收单元510，用于接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
处理单元520，用于根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
发送单元530，用于实例化目标CRE，并将分配给实例化的目标CRE的第一虚拟机资源的信息发送给目标CRE对应的容器管理器，第一虚拟机资源由容器管理器管理；
发送单元530，还用于向容器管理器发送软件镜像加载请求消息，软件镜像加载请求消息用于容器管理器将容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
发送单元530，还用于向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
可选地，在一个实施例中，接收单元510，还用于接收NFVO为实例化目标CRE分配的第二虚拟机资源的信息，第二虚拟机资源的信息包括虚拟机的标识。
可选地，在一个实施例中，处理单元520根据关系信息确定容器化VNF部署的目标CRE，包括：
处理单元520根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
可选地，在一个实施例中，VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；处理单元520根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
可选地，在另一个实施例中，VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项；处理单元520根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
由于上述实施例中该装置的各单元解决问题的实施方式以及有益效果可以参见图4中VNFM执行容器化VNF部署的方法以及有益效果，为简洁描述，故在此不复赘述。
本发明实施例还提供了一种容器化虚拟网络功能部署的装置，如图9所示，该装置是VNFM，用于容器化VNF的部署，其中，VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC，CRE实例部署在NFVI中；该VNFM的各个单元用于执行以下操作：
接收单元510，用于接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
处理单元520，用于根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
发送单元530，用于将分配给目标CRE的第一虚拟机资源的信息发送给目标CRE对应的容器管理器，第一虚拟机资源由容器管理器管理；
发送单元530，还用于向目标CRE对应的容器管理器发送软件镜像加载请求消息，软件镜像加载请求消息用于容器管理器将容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
发送单元530，还用于向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。实现了VNFM对容器化VNF进行差异化处理的部署方法，增强了容器化VNF部署的弹性。
可选地，在一个实施例中，处理单元520根据关系信息确定容器化VNF部署的目标CRE，包括：
处理单元520根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
可选地，在一个实施例中，VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；处理单元520根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
可选地，在一个实施例中，VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项；处理单元520根据VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
由于上述实施例中该装置的各单元解决问题的实施方式以及有益效果可以参见图6中VNFM执行容器化VNF部署的方法以及有益效果，为简洁描述，故在此不复赘述。
图10是本申请实施例提供的一种容器管理器的结构示意图。如图10所示，该容器管理器包括接收单元610、处理单元620。
接收单元610，用于接收虚拟网络功能管理器VNFM发送的第一虚拟机资源的信息；
接收单元610，还用于接收VNFM发送的软件镜像加载请求消息；
处理单元620，用于根据软件镜像加载请求消息将容器化VNFC的镜像加载到容器单元，并将容器单元编排到第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
接收单元610，还用于接收VNFM发送的容器化VNFC实例化的请求消息；
处理单元620，还用于根据容器化VNFC实例化的请求消息完成容器化VNFC的实例化。
可选地，在一个实施例中，该容器管理器还包括发送单元630，用于向VNFM发送容器化VNFC实例化的应答消息。
由于上述实施例中该装置的各单元解决问题的实施方式以及有益效果可以参见图4和图6中容器管理器执行容器化VNFC部署的方法以及有益效果，为简洁描述，故在此不复赘述。
本发明实施例还提供了一种容器化虚拟网络功能部署的装置，如图9所示，该装置是VNFM，用于容器化VNF的部署，其中，容器化VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC。该VNFM的各个单元用于执行以下操作：
接收单元510，用于接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息；
处理单元520，用于根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据关系信息确定容器化VNF部署的目标CRE；
接收单元510，还用于接收NFVO发送的第一虚拟机资源的信息，第一虚拟机资源的信息是为实例化容器化VNFC分配的由容器管理器管理的虚拟机资源的信息；
发送单元530，用于向容器管理器发送第一虚拟机资源的信息；
发送单元530，还用于向容器管理器发送第一软件镜像加载请求消息，第一软件镜像加载请求消息用于容器管理器将部署在实例化的目标CRE上的容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，其中，容器单元是承载容器化VNFC的镜像运行的容器计算资源；
发送单元530，还用于向容器管理器发送容器化VNFC实例化的请求消息，容器化VNFC实例化的请求消息用于容器管理器执行容器化VNFC的实例化。
可选地，在一个实施例中，处理单元520根据关系信息确定容器化VNF部署的目标CRE，包括：
处理单元520根据关系信息确定容器化VNFC所部署的一个或多个目标CRE。
可选地，在一个实施例中，第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；处理单元520根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520从VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
可选地，在另一个实施例中，第一VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项；处理单元520根据第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
处理单元520根据部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
可选地，在一个实施例中，处理单元520，还用于实例化目标CRE。
处理单元520实例化目标CRE，包括：
接收单元510，还用于接收NFVO发送的第二VNF实例化请求消息，第二VNF实例化请求消息包括目标CRE实例标识；处理单元520，实例化所述目标CRE实例标识对应的目标CRE。
该实施例中该装置的各单元解决问题的实施方式以及有益效果可以参见图7和图8中VNFM执行容器化VNF部署的方法以及有益效果，为简洁描述，故在此不复赘述。
图11是本申请实施例提供的一种容器化虚拟网络功能部署的装置，该装置是网络功能虚拟化编排器NFVO，NFVO可以包括发送单元710和分配单元720。
发送单元710，用于向虚拟网络功能管理器VNFM发送第一虚拟网络功能VNF实例化请求消息；第一VNF实例化请求消息用于VNFM获取容器化VNF部署的目标容器化运行时CRE；
分配单元720，用于为实例化容器化虚拟网络功能组件VNFC分配第一虚拟机资源的信息，第一虚拟机资源由容器管理器管理；
发送单元710，还用于向VNFM发送第一虚拟机资源的信息，第一虚拟机资源的信息用于VNFM将部署在实例化的目标CRE上的容器化VNFC的镜像加载到容器单元内，并将容器单元编排到容器管理器管理的第一虚拟机资源上，容器单元是承载容器化VNFC的镜像运行的容器计算资源。
可选地，在一个实施例中第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识。
可选地，在一个实施例中，第一VNF实例化请求消息包括容器化VNF的部署模板标识或者实例化等级标识中的至少一项。
可选地，在一个实施例中，发送单元710，还用于向VNFM发送第二VNF实例化请求消息，第二VNF实例化请求消息包括目标CRE实例标识，用于实例化所述目标CRE实例标识对应的目标CRE。
该实施例中该装置的各单元解决问题的实施方式以及有益效果可以参见图7和图8中NFVO执行容器化VNF部署的方法以及有益效果，为简洁描述，故在此不复赘述。
本申请实施例还提供了一种容器化虚拟网络功能部署的装置，如图12所示，该装置适用于能部署容器技术的设备等，不限制于中央处理器(central processing unit，CPU)。如图12所示，该装置可以包括：存储器810和处理器820。
存储器810可通过总线与处理器820连接。存储器810可以是非易失存储器，例如硬盘驱动器和闪存，存储器810中具有软件程序和设备驱动程序。软件程序能够执行本申请图4、图6、图7和图8中VNFC、容器管理器和NFVO所执行方法的各种功能；设备驱动程序可以是网络和接口驱动程序。
存储器810用于存储程序。处理器820用于执行软件程序，当程序在执行时，能够实现图4、图6、图7和图8中VNFC、容器管理器和NFVO所执行方法。
由于上述实施例中该装置的各器件解决问题的实施方式以及有益效果可以参见方法实施方式以及有益效果，故在此不复赘述。
本申请实施例还提供了一种包含指令的计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行图4、图6、图7和图8中VNFC、容器管理器和NFVO所执行方法。
本申请实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现图4、图6、图7和图8中VNFC、容器管理器和NFVO所执行方法。
在上述各个本发明实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读介质向另一个计算机可读介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(Digital Subscriber Line，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如，固态硬盘(Solid State Disk，SSD))等。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (37)

  1. 一种容器化虚拟网络功能的部署方法，其特征在于，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；所述方法包括：
    虚拟网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
    所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所述关系信息确定容器化VNF部署的目标CRE；
    所述VNFM实例化所述目标CRE，并将分配给实例化的所述目标CRE的第一虚拟机资源的信息发送给所述目标CRE对应的容器管理器，所述第一虚拟机资源由所述容器管理器管理；
    所述VNFM向所述容器管理器发送软件镜像加载请求消息，所述软件镜像加载请求消息用于所述容器管理器将所述容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述VNFM向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  2. 根据权利要求1所述的方法，其特征在于，在所述VNFM实例化所述目标CRE之前，所述方法还包括：
    所述VNFM接收所述NFVO为实例化所述目标CRE分配的第二虚拟机资源的信息，所述第二虚拟机资源的信息包括虚拟机的标识。
  3. 根据权利要求1所述的方法，其特征在于，所述根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  4. 根据权利要求1或2所述的方法，其特征在于，所述VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  5. 根据权利要求1或2所述的方法，其特征在于，所述VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  6. 一种容器化虚拟网络功能的部署方法，其特征在于，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC，所述CRE实例部署在网络功能虚拟化基础设施NFVI中；所述方法包括：
    虚拟网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
    所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所 述关系信息确定容器化VNF部署的目标CRE；
    所述VNFM将分配给所述目标CRE的第一虚拟机资源的信息发送给所述目标CRE对应的容器管理器，所述第一虚拟机资源由所述容器管理器管理；
    所述VNFM向所述目标CRE对应的容器管理器发送软件镜像加载请求消息，所述软件镜像加载请求消息用于所述容器管理器将容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述VNFM向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  7. 根据权利要求6所述的方法，其特征在于，所述根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  8. 根据权利要求6或7所述的方法，其特征在于，所述VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  9. 根据权利要求6或7所述的方法，其特征在于，所述VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述VNFM根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  10. 一种容器化虚拟网络功能的部署方法，其特征在于，所述方法包括：
    容器管理器接收虚拟网络功能管理器VNFM发送的第一虚拟机资源的信息；
    所述容器管理器接收所述VNFM发送的软件镜像加载请求消息；
    所述容器管理器根据所述软件镜像加载请求消息将容器化VNFC的镜像加载到容器单元，并将所述容器单元编排到所述第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述容器管理器接收所述VNFM发送的容器化VNFC实例化的请求消息；
    所述容器化管理器根据所述容器化VNFC实例化的请求消息完成所述容器化VNFC的实例化。
  11. 根据权利要求10所述的方法，其特征在于，所述方法还包括：
    所述容器管理器向所述VNFM发送容器化VNFC实例化的应答消息。
  12. 一种容器化虚拟网络功能的部署方法，其特征在于，容器化虚拟网络功能VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；所述方法包括：
    虚拟机网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息；
    所述VNFM根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所述关系信息确定容器化VNF部署的目标CRE；
    所述VNFM接收所述NFVO发送的第一虚拟机资源的信息，所述第一虚拟机资源的信息是为实例化所述容器化VNFC分配的由容器管理器管理的虚拟机资源的信息；
    所述VNFM向容器管理器发送所述第一虚拟机资源的信息；
    所述VNFM向所述容器管理器发送第一软件镜像加载请求消息，所述第一软件镜像加载请求消息用于所述容器管理器将部署在实例化的所述目标CRE上的容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述VNFM向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  13. 根据权利要求12所述的方法，其特征在于，所述根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  14. 根据权利要求12或13所述的方法，其特征在于，所述第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述VNFM根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  15. 根据权利要求12或13所述的方法，其特征在于，所述第一VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述VNFM根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述VNFM根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  16. 根据权利要求12至15任一项所述的方法，其特征在于，在虚拟机网络功能管理器VNFM接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息之前，所述方法还包括：
    所述VNFM实例化所述目标CRE。
  17. 根据权利要求16所述的方法，其特征在于，所述VNFM实例化所述目标CRE，包括：
    所述VNFM接收所述NFVO发送的第二VNF实例化请求消息，所述第二VNF实例化请求消息包括目标CRE实例标识；
    所述VNFM实例化所述目标CRE实例标识对应的目标CRE。
  18. 一种虚拟网络功能管理器VNFM，其特征在于，VNFM用于部署容器化虚拟网络功能VNF，所述容器化VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；所述VNFM 包括：
    接收单元，用于接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
    处理单元，用于根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所述关系信息确定容器化VNF部署的目标CRE；
    发送单元，用于实例化所述目标CRE，并将分配给实例化的所述目标CRE的第一虚拟机资源的信息发送给所述目标CRE对应的容器管理器，所述第一虚拟机资源由所述容器管理器管理；
    所述发送单元，还用于向所述容器管理器发送软件镜像加载请求消息，所述软件镜像加载请求消息用于所述容器管理器将所述容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述发送单元，还用于向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  19. 根据权利要求18所述的VNFM，其特征在于，
    所述接收单元，还用于接收所述NFVO为实例化所述目标CRE分配的第二虚拟机资源的信息，所述第二虚拟机资源的信息包括虚拟机的标识。
  20. 根据权利要求18所述的VNFM，其特征在于，所述处理单元根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    所述处理单元根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  21. 根据权利要求18或19所述的VNFM，其特征在于，所述VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述处理单元根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  22. 根据权利要求18或19所述的VNFM，其特征在于，所述VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述处理单元根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  23. 一种虚拟网络功能管理器VNFM，其特征在于，所述VNFM用于部署容器化虚拟网络功能VNF，所述VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC，所述CRE实例部署在网络功能虚拟化基础设施NFVI中；所述VNFM包括：
    接收单元，用于接收网络功能虚拟化编排器NFVO发送的VNF实例化请求消息；
    处理单元，用于根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所述关系信息确定容器化VNF部署的目标CRE；
    发送单元，用于将分配给所述目标CRE的第一虚拟机资源的信息发送给所述目标CRE对 应的容器管理器，所述第一虚拟机资源由所述容器管理器管理；
    所述发送单元，还用于向所述目标CRE对应的容器管理器发送软件镜像加载请求消息，所述软件镜像加载请求消息用于所述容器管理器将容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述发送单元，还用于向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  24. 根据权利要求23所述的VNFM，其特征在于，所述处理单元根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    所述处理单元根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  25. 根据权利要求23或24所述的VNFM，其特征在于，所述VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述处理单元根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  26. 根据权利要求23或24所述的VNFM，其特征在于，所述VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述处理单元根据所述VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  27. 一种容器管理器，其特征在于，所述容器管理器包括：
    接收单元，用于接收虚拟网络功能管理器VNFM发送的第一虚拟机资源的信息；
    所述接收单元，还用于接收所述VNFM发送的软件镜像加载请求消息；
    处理单元，用于根据所述软件镜像加载请求消息将容器化VNFC的镜像加载到容器单元，并将所述容器单元编排到所述第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述接收单元，还用于接收所述VNFM发送的容器化VNFC实例化的请求消息；
    所述处理单元，还用于根据所述容器化VNFC实例化的请求消息完成所述容器化VNFC的实例化。
  28. 根据权利要求27所述的容器管理器，其特征在于，所述容器管理器还包括发送单元，用于向所述VNFM发送容器化VNFC实例化的应答消息。
  29. 一种虚拟机网络功能管理器VNFM，其特征在于，所述VNFM用于部署容器化虚拟网络功能VNF，所述容器化VNF包括容器运行时环境CRE和容器化虚拟网络功能组件VNFC；所述VNFM包括：
    接收单元，用于接收网络功能虚拟化编排器NFVO发送的第一虚拟网络功能VNF实例化请求消息；
    处理单元，用于根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，并根据所述关系信息确定容器化VNF部署的目标CRE；
    所述接收单元，还用于接收所述NFVO发送的第一虚拟机资源的信息，所述第一虚拟机资源的信息是为实例化所述容器化VNFC分配的由容器管理器管理的虚拟机资源的信息；
    发送单元，用于向容器管理器发送所述第一虚拟机资源的信息；
    所述发送单元，还用于向所述容器管理器发送第一软件镜像加载请求消息，所述第一软件镜像加载请求消息用于所述容器管理器将部署在实例化的所述目标CRE上的容器化VNFC的镜像加载到容器单元内，并将所述容器单元编排到所述容器管理器管理的第一虚拟机资源上，其中，所述容器单元是承载所述容器化VNFC的镜像运行的容器计算资源；
    所述发送单元，还用于向所述容器管理器发送容器化VNFC实例化的请求消息，所述容器化VNFC实例化的请求消息用于所述容器管理器执行所述容器化VNFC的实例化。
  30. 根据权利要求29所述的VNFM，其特征在于，所述处理单元根据所述关系信息确定容器化VNF部署的目标CRE，包括：
    所述处理单元根据所述关系信息确定容器化VNFC所部署的一个或多个目标CRE。
  31. 根据权利要求29或30所述的VNFM，其特征在于，所述第一VNF实例化请求消息包括容器化VNF的描述符文件VNFD的标识；所述处理单元根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元从所述VNFD的标识对应的VNFD中获取容器化VNFC与CRE的关系信息。
  32. 根据权利要求29或30所述的VNFM，其特征在于，所述第一VNF实例化请求消息包括所述容器化VNF的部署模板标识或者实例化等级标识中的至少一项；所述处理单元根据所述第一VNF实例化请求消息获取容器化VNFC与CRE的关系信息，包括：
    所述处理单元根据所述部署模板标识或者实例化等级标识中的至少一项获取容器化VNFC与CRE的关系信息。
  33. 根据权利要求29至32任一项所述的VNFM，其特征在于，
    所述处理单元，还用于实例化所述目标CRE。
  34. 根据权利要求33所述的VNFM，其特征在于，所述处理单元实例化所述目标CRE，包括：
    所述接收单元，还用于接收所述NFVO发送的第二VNF实例化请求消息，所述第二VNF实例化请求消息包括目标CRE实例标识；
    所述处理单元实例化所述目标CRE实例标识对应的目标CRE。
  35. 一种装置，其特征在于，所述装置包括处理器和存储器，所述存储器用于存储程序，所述处理器用于读取执行所述程序，所述程序执行时，能够实现权利要求1至17任意一项所述的方法。
  36. 一种包含指令的计算机程序产品，其特征在于，当所述计算机程序产品在计算机上运行时，使得所述计算机执行如权利要求1至17任意一项所述的方法。
  37. 一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机 程序，所述计算机程序被处理器执行时实现如权利要求1至17任意一项所述的方法。
PCT/CN2019/120229 2018-11-23 2019-11-22 一种容器化虚拟网络功能的部署方法和装置 WO2020103925A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201811408649.1 2018-11-23
CN201811408649.1A CN111221618B (zh) 2018-11-23 2018-11-23 一种容器化虚拟网络功能的部署方法和装置

Publications (1)

Publication Number Publication Date
WO2020103925A1 true WO2020103925A1 (zh) 2020-05-28

Family

ID=70773271

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2019/120229 WO2020103925A1 (zh) 2018-11-23 2019-11-22 一种容器化虚拟网络功能的部署方法和装置

Country Status (2)

Country Link
CN (1) CN111221618B (zh)
WO (1) WO2020103925A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210311757A1 (en) * 2020-04-02 2021-10-07 Vmware, Inc. Introspection into workloads running within virtual machines
CN114143184A (zh) * 2020-08-14 2022-03-04 中国移动通信有限公司研究院 虚拟网络功能的部署方法、装置、设备及存储介质
WO2022199825A1 (en) 2021-03-25 2022-09-29 Telefonaktiebolaget Lm Ericsson (Publ) Separation of network function and its realization

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111857972A (zh) * 2020-07-29 2020-10-30 山东海量信息技术研究院 虚拟化网络功能vnf的部署方法、部署装置、部署设备
CN116458130A (zh) * 2020-11-09 2023-07-18 中兴通讯股份有限公司 一种容器集群缩放的方法、设备和系统
WO2022198524A1 (zh) * 2021-03-24 2022-09-29 华为技术有限公司 服务实例部署方法、节点间的负载均衡方法及系统
CN116661941A (zh) * 2022-02-18 2023-08-29 华为技术有限公司 一种虚拟网络功能vnf实例化的方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106533935A (zh) * 2015-09-14 2017-03-22 华为技术有限公司 一种在云计算系统中获取业务链信息的方法和装置
CN107547237A (zh) * 2016-06-29 2018-01-05 中兴通讯股份有限公司 虚拟网络功能vnf更新方法、装置和vnf包
CN107689882A (zh) * 2016-08-05 2018-02-13 华为技术有限公司 一种虚拟化网络中业务部署的方法和装置
CN107819598A (zh) * 2016-09-13 2018-03-20 中兴通讯股份有限公司 一种管理网络功能节点的方法及装置
US20180123943A1 (en) * 2016-11-03 2018-05-03 Futurewei Technologies, Inc. Global Resource Orchestration System for Network Function Virtualization
WO2018174897A1 (en) * 2017-03-24 2018-09-27 Nokia Technologies Oy Methods and apparatuses for multi-tiered virtualized network function scaling

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017028317A1 (en) * 2015-08-20 2017-02-23 Hewlett Packard Enterprise Development Lp Containerized virtual network function
CN106506186A (zh) * 2015-09-08 2017-03-15 中兴通讯股份有限公司 重建虚拟网络功能的方法和装置
CN108462656B (zh) * 2016-12-09 2021-08-06 中国移动通信有限公司研究院 基于容器的业务融合部署的资源调度方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106533935A (zh) * 2015-09-14 2017-03-22 华为技术有限公司 一种在云计算系统中获取业务链信息的方法和装置
CN107547237A (zh) * 2016-06-29 2018-01-05 中兴通讯股份有限公司 虚拟网络功能vnf更新方法、装置和vnf包
CN107689882A (zh) * 2016-08-05 2018-02-13 华为技术有限公司 一种虚拟化网络中业务部署的方法和装置
CN107819598A (zh) * 2016-09-13 2018-03-20 中兴通讯股份有限公司 一种管理网络功能节点的方法及装置
US20180123943A1 (en) * 2016-11-03 2018-05-03 Futurewei Technologies, Inc. Global Resource Orchestration System for Network Function Virtualization
WO2018174897A1 (en) * 2017-03-24 2018-09-27 Nokia Technologies Oy Methods and apparatuses for multi-tiered virtualized network function scaling

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210311757A1 (en) * 2020-04-02 2021-10-07 Vmware, Inc. Introspection into workloads running within virtual machines
US11513830B2 (en) * 2020-04-02 2022-11-29 Vmware, Inc. Introspection into workloads running within virtual machines
CN114143184A (zh) * 2020-08-14 2022-03-04 中国移动通信有限公司研究院 虚拟网络功能的部署方法、装置、设备及存储介质
WO2022199825A1 (en) 2021-03-25 2022-09-29 Telefonaktiebolaget Lm Ericsson (Publ) Separation of network function and its realization

Also Published As

Publication number Publication date
CN111221618A (zh) 2020-06-02
CN111221618B (zh) 2024-01-30

Similar Documents

Publication Publication Date Title
WO2020103925A1 (zh) 一种容器化虚拟网络功能的部署方法和装置
US10701139B2 (en) Life cycle management method and apparatus
US11928522B2 (en) Containerized VNF deployment method and related device
JP6658882B2 (ja) 制御装置、ｖｎｆ配置先選択方法及びプログラム
WO2017080391A1 (zh) 一种网络服务部署方法和装置
CN109428764B (zh) 虚拟网络功能的实例化方法
WO2017185303A1 (zh) 一种nfv mano策略描述符的管理方法及装置
WO2020011214A1 (zh) 管理虚拟化资源的方法和装置
CN109995552B (zh) Vnf服务实例化方法及装置
WO2019179301A1 (zh) 一种管理虚拟资源的方法及装置
CN111698112A (zh) 一种容器化虚拟网络功能vnf的资源管理方法及装置
CN111835679B (zh) 多租户场景下的租户资源管理方法和装置
WO2021063130A1 (zh) 网络资源管理方法、系统、网络设备和可读存储介质
US20230261950A1 (en) Method of container cluster management and system thereof
WO2019001140A1 (zh) 一种管理vnf实例化的方法和设备
EP4177742A1 (en) Multitenancy management method and apparatus
CN109905258B (zh) PaaS的管理方法、装置及存储介质
US20230342183A1 (en) Management method and apparatus for container cluster
CN110795202A (zh) 一种虚拟化集群资源管理系统的资源分配方法以及装置
CN112015515B (zh) 一种虚拟网络功能的实例化方法及装置
WO2021004320A1 (zh) 服务资源许可管理方法和相关设备
CN112889247B (zh) Vnf服务实例化方法及装置
WO2023066224A1 (zh) 一种部署容器服务的方法及装置
WO2023155838A1 (zh) 一种虚拟网络功能vnf实例化的方法及装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19887011

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19887011

Country of ref document: EP

Kind code of ref document: A1