WO2014101892A1 - 资源调整的方法及装置 - Google Patents

资源调整的方法及装置 Download PDF

Info

Publication number
WO2014101892A1
WO2014101892A1 PCT/CN2013/091165 CN2013091165W WO2014101892A1 WO 2014101892 A1 WO2014101892 A1 WO 2014101892A1 CN 2013091165 W CN2013091165 W CN 2013091165W WO 2014101892 A1 WO2014101892 A1 WO 2014101892A1
Authority
WO
WIPO (PCT)
Prior art keywords
operating system
cpu
resource
adjusted
managed
Prior art date
Application number
PCT/CN2013/091165
Other languages
English (en)
French (fr)
Inventor
赵慧斌
徐胜新
李泉
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Publication of WO2014101892A1 publication Critical patent/WO2014101892A1/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]

Definitions

  • the present invention relates to the field of communications technologies, and in particular, to a method and apparatus for resource adjustment. Background technique
  • SMP-based heterogeneous systems usually use static methods to deploy resources, such as static and heterogeneous deployment methods of the control plane/forwarding plane.
  • the SMP architecture applies separate heterogeneous operating systems on the control plane and the forwarding plane to support different Apply different appeals to the operating system.
  • the board is restarted only by restarting the board.
  • the inventors have found that the prior art has at least the following disadvantages:
  • the CPU resource occupancy rate is almost 100%, resulting in a letter.
  • the processing is blocked, and the forwarding plane of the voice service is responsible.
  • the CPU resource occupancy rate is close to 0%, which causes the multi-CPU processing capability allocation to be mismatched with the expected one, and then one system load is too large, and the other one The system is too idle. Therefore, adjusting resources by restarting the board will result in a long-term service interruption.
  • a method for resource adjustment includes: determining a first operating system for resource adjustment, and determining a central processing unit to be adjusted
  • the determining, by the first operating system, the resource adjustment includes:
  • the acquiring resource information of each managed operating system includes:
  • the resource usage of each managed operating system is detected every preset time, and the resource information of each managed operating system is obtained according to the obtained detection result;
  • the resource information records of the managed operating systems are obtained, and the resource information of the managed operating systems is obtained according to the resource information records.
  • the resource usage of each managed operating system is detected every preset time, and each managed device is obtained according to the detection result.
  • Resource information of the operating system including:
  • the method further includes:
  • a device for resource adjustment comprising:
  • a first determining module configured to determine a first operating system for resource adjustment
  • a second determining module configured to determine a central processing unit CPU to be adjusted
  • a setting module configured to set a bootstrap address for the CPU to be adjusted determined by the second determining module, so that the CPU to be adjusted bootstraps according to the bootstrap address, the bootstrap address and the first Determining that the access entry address of the first operating system determined by the module is the same;
  • a sending module configured to send, by the second determining module, a CPU number corresponding to the CPU to be adjusted to the first operating system determined by the first determining module, so that the first operating system corresponds the CPU number
  • the CPU joins the scheduling management of the first operating system.
  • the first determining module includes:
  • the obtaining sub-module is configured to obtain the resource information of the managed operating system
  • the determining sub-module is configured to determine, according to the resource information of the managed operating systems acquired by the obtaining sub-module, the first operating system for resource adjustment.
  • the acquiring a sub-module includes:
  • the first acquiring unit is configured to detect, according to the obtained detection result, the resource information of each managed operating system, according to the obtained detection result;
  • the second obtaining unit is configured to acquire resource information records of the managed operating systems, and obtain resource information of the managed operating systems according to the resource information records.
  • the first acquiring unit is configured to send a resource query instruction to each managed operating system every preset time, and Receiving, according to the resource occupation situation returned by the resource query instruction, each managed operating system obtains the managed operations according to the resource occupation situation. System resource information.
  • the second determining module is further configured to: if the CPU to be adjusted is in a non-idle state, send a resource adjustment command to the second operating system where the CPU to be adjusted is located, where And causing the second operating system to set the CPU to be adjusted to an idle state.
  • FIG. 1 is a flowchart of a method for resource adjustment according to Embodiment 1 of the present invention
  • FIG. 2 is a schematic diagram of a process for implementing resource adjustment in a network application according to Embodiment 2 of the present invention
  • FIG. 3 is a flowchart of a resource adjustment method according to Embodiment 2 of the present invention
  • FIG. 4 is a schematic structural diagram of a resource adjustment apparatus according to Embodiment 3 of the present invention
  • FIG. 6 is a schematic structural diagram of an acquisition submodule according to Embodiment 3 of the present invention.
  • This embodiment provides a method for resource adjustment. Referring to FIG. 1, the process of the method provided in this embodiment is specifically as follows:
  • the bootstrap address of the CPU to be adjusted is the same as the access entry address of the first operating system.
  • the method provided by the embodiment after determining the first operating system of the resource adjustment, and after determining the CPU to be adjusted, setting a bootstrap address that is the same as the access entry address of the first operating system for the CPU to be adjusted, so that the method
  • the CPU to be adjusted can perform bootstrapping according to the bootstrap address, and then joins the scheduling management of the first operating system, thereby realizing dynamic adjustment of system resources without interrupting the service.
  • Embodiment 2 In order to clarify the method of the resource adjustment provided by the foregoing embodiment, the method of the resource adjustment is described in detail in the following example 2. The following is the second embodiment: Embodiment 2
  • This embodiment provides a resource adjustment method.
  • the network application includes a control plane and a forwarding plane, and the control plane operating system management.
  • Tasks 1, task 2, etc. occupy resource CPU0,
  • 301 Obtain resource information of each managed operating system, and determine a first operating system for resource adjustment according to resource information of the operating system;
  • the embodiment does not specifically limit the manner of obtaining the resource information of the managed operating systems, and includes any one of the following two methods:
  • the first type detects the resource usage of each managed operating system every preset time, and obtains resource information of each managed operating system according to the obtained detection result; For example, the resource query instruction is sent to each managed operating system every preset time, and the resource usage information returned by each managed operating system according to the query instruction is received, and the resource information of each managed operating system is obtained according to the resource occupation situation. .
  • the resource query instruction is sent to the managed control plane operating system and the forwarding plane operating system every three hours, and the control plane operating system and the forwarding plane operating system are returned according to the query instruction.
  • the resource information of each operating system managed is obtained according to the resource occupation.
  • the preset time may be other time lengths, such as 1 hour, 2 hours, etc., in the preset time, and the length of the preset time is not limited in this embodiment.
  • the resource information records of the managed operating systems are obtained, and the resource information of each managed operating system is obtained according to the resource information records.
  • the resource information record may be a record obtained by detecting resource information of each operating system before, for example, after detecting resource information of each operating system every time according to the first manner, storing the detection result, and obtaining Resource information record.
  • the resource information record may also be obtained according to a time period in which each operating system processes the service, for example, recording a peak period or a trough period of processing operations of each operating system, and resource occupation status when processing the service during a peak period or a trough period, Resource information records for each operating system.
  • the resource information record of the control plane operating system and the forwarding plane operating system in FIG. 2 (a) is obtained, and the resource information record is the control plane operating system management task 1, task 2 and other tasks occupying resources CPU0, CPU1, CPU2; Forwarding plane operating system management BM0,
  • the resources occupied by the BM1 BM-S task, CPU3, CPU4, CPU5, CPU6, and CPU7, for example, can obtain the resource information of the control plane operating system and the forwarding plane operating system according to the resource information record.
  • the first operating system of the resource-adjusted first operating system is not specifically limited, including but not limited to the first operating system that determines resource adjustment according to the managed CPU usage of each operating system. For example, the operating system with the highest CPU usage is determined as the first operating system for resource adjustment, or the CPU usage threshold is set, and the operating system with the highest CPU usage and the CPU usage greater than the set CPU usage threshold is determined as The first operating system for resource adjustment. As shown in Figure 2 (a), if the operating system CPU usage of the control plane is greater than the CPU usage of the forwarding plane operating system, the control plane is determined to be the first operating system.
  • CPU to be adjusted since the CPU usage and status of each managed operating system are recorded, the exact usage of each CPU can be known at any time, so it can be determined according to the CPU usage records of the managed operating systems.
  • CPU to be adjusted This embodiment does not specifically limit the CPU determining manner to be adjusted, including but not limited to the idle state CPU in the idle state that is not used by each operating system as the CPU to be adjusted, or is occupied by the operating system but is now in an idle state.
  • the idle state CPU is determined to be the CPU to be adjusted, or the non-idle state CPU that is now occupied by the operating system but the occupied service can be closed is determined as the CPU to be adjusted.
  • the resource CPU3 occupied by the BM0 is determined as the CPU to be adjusted.
  • step 303 Determine whether the CPU to be adjusted is idle, if it is idle, go to step 305, if it is not idle, go to step 306;
  • the CPU to be adjusted since it is determined in the above step 303 that the CPU to be adjusted is in a non-idle state, in order to implement adjustment to the scheduling management of the first operating system, it can be set to idle by the second operating system in which it is located. The state, such that subsequent implementations pull it out of the second operating system to insert the first operating system.
  • the method in this embodiment does not specifically limit the method for the second operating system to set the CPU to be adjusted to the idle state. For example, after receiving the resource adjustment command, the second operating system can no longer run any code on the CPU to be adjusted, so that the CPU to be adjusted is in deep sleep, and then enters an idle state.
  • the CPU 3 is in a non-idle state, and sends a resource adjustment command to the operating system of the forwarding plane where the CPU 3 is located, so that the forwarding plane operating system closes the service BMO.
  • No more code is running on CPU3, as shown in Figure 2(b), which makes CPU3 idle, as shown in Figure 2(c).
  • 305 Set a bootstrap address that is the same as an access entry address of the first operating system for the CPU to be adjusted, so that the CPU to be adjusted bootstraps according to the bootstrap address;
  • this embodiment does not limit the manner in which the CPU to be adjusted is set to the bootstrap address with the same access entry address of the first operating system. Since the bootstrap address set for the CPU to be adjusted is the same as the access entry address of the first operating system, the CPU to be adjusted can perform a correct bootstrapping process, thereby being able to join the scheduling management of the first operating system through subsequent steps. And realizing resource adjustment of the CPU to be adjusted from the second operating system to the first operating system.
  • the bootstrap process is not specifically limited in this embodiment.
  • the CPU3 bootstraps according to the access entry address of the control plane operating system, and sets the IPI (Inter- Processor Interrupt (interrupt between processors) Interrupt processing, after waiting for the IPI interrupt of the first operating system to arrive, joins the scheduling management of the first operating system.
  • IPI Inter- Processor Interrupt
  • the first operating system can send an IPI interrupt to the CPU corresponding to the CPU number, thereby implementing the CPU corresponding to the CPU number.
  • the scheduling management domain of the first operating system is not limited to the CPU number corresponding to the CPU to be adjusted.
  • the CPU3 shown in (c) is set with the same bootstrapping address as the access entry address of the control plane operating system, and the CPU 3 bootstraps according to the bootstrap address, and sends the CPU number corresponding to the CPU3 to
  • the control plane operating system is taken as an example.
  • the control plane operating system sends the CPU 3 to the control plane scheduling management by sending an IPI interrupt to the CPU 3, and enters the situation shown in FIG. 2(d).
  • the method provided by the embodiment after determining the first operating system of the resource adjustment, and after determining the CPU to be adjusted, setting a bootstrap address that is the same as the access entry address of the first operating system for the CPU to be adjusted, so that the method
  • the CPU to be adjusted can perform bootstrapping according to the bootstrap address, and then joins the scheduling management of the first operating system, thereby realizing dynamic adjustment of system resources without interrupting the service.
  • the present embodiment provides a device for resource scheduling, which is used to implement the method for implementing resource adjustment provided by the foregoing Embodiment 1 and Embodiment 2.
  • the device includes: a first determining module 401, configured to determine a first operating system for resource adjustment; a second determining module 402, configured to determine a central processing unit CPU to be adjusted;
  • the setting module 403 is configured to set a bootstrap address for the CPU to be adjusted determined by the second determining module 402, so that the CPU to be adjusted bootstraps according to the bootstrap address, wherein the bootstrap address and the first operation determined by the first determining module
  • the access address of the system is the same;
  • the sending module 404 is configured to send the CPU number corresponding to the CPU to be adjusted determined by the second determining module 402 to the first operating system determined by the first determining module 401, so that the first operating system adds the CPU corresponding to the CPU number to the Scheduling management of the first operating system.
  • the first determining module further includes:
  • the obtaining sub-module 4011 is configured to obtain the resource information of the managed operating system
  • the determining sub-module 4012 is configured to determine, according to the resource information of the managed operating systems acquired by the obtaining sub-module 4011, the first operating system for resource adjustment. .
  • the obtaining submodule further includes:
  • the first obtaining unit 40111 is configured to send a resource query instruction to each managed operating system every preset time, and receive the resource occupation status returned by the managed operating system according to the resource query instruction, and obtain the managed according to the resource occupation situation.
  • Resource information for each operating system is configured to send a resource query instruction to each managed operating system every preset time, and receive the resource occupation status returned by the managed operating system according to the resource query instruction, and obtain the managed according to the resource occupation situation.
  • the second obtaining unit 40112 is configured to acquire resource information records of the managed operating systems, and obtain resource information of the managed operating systems according to the resource information records.
  • the second determining module 402 is further configured to: if the CPU to be adjusted is in a non-idle state, send a resource adjustment command to the second operating system where the CPU to be adjusted is located, so that the second operating system sets the CPU to be adjusted to be idle. status.
  • the device for adjusting the resource may be built in any one of the operating systems that are managed, or may exist independently of the managed operating system, which is not specifically limited in this embodiment.
  • the device provided by the embodiment, by determining the first operating system for resource adjustment, and after determining the CPU to be adjusted, setting a bootstrap address that is the same as the access entry address of the first operating system for the CPU to be adjusted, so that the device The CPU to be adjusted can perform bootstrapping according to the bootstrap address, and then joins the scheduling management of the first operating system, thereby realizing dynamic adjustment of system resources without interrupting the service.
  • Embodiment 4 This embodiment provides a device for resource adjustment, and the device includes: a processor.
  • the processor is configured to determine a first operating system for resource adjustment; determine a CPU to be adjusted; and set a bootstrap address for the CPU to be adjusted, so that the CPU to be adjusted bootstraps according to its bootstrap address, where the bootstrap address
  • the first operating system is configured to send the CPU number corresponding to the CPU to be sent to the first operating system, and the first operating system adds the CPU corresponding to the CPU number to the first operation. Scheduling management of the system.
  • the processor is configured to acquire resource information of each managed operating system when determining the resource-adjusted first operating system, and determine a resource-adjusted first operating system according to the managed resource information of each operating system.
  • the processor when acquiring the resource information of the managed operating systems, is configured to detect the resource occupation status of each managed operating system every preset time, and obtain the managed operating systems according to the obtained detection result.
  • the resource information records are obtained, or the resource information records of the managed operating systems are obtained, and the resource information of each managed operating system is obtained according to the resource information records.
  • the processor detects the resource usage of each of the managed operating systems at a preset time, and obtains the resource information of each managed operating system according to the obtained detection result, and is used to manage the resources every preset time.
  • Each operating system sends a resource query instruction, and receives the resource occupation status returned by each managed operating system according to the resource query instruction, and obtains the resource information of each managed operating system according to the resource occupation status.
  • the processor is further configured to: if the CPU to be adjusted is in a non-idle state, send a resource adjustment command to the second operating system where the CPU to be adjusted is located, so that the second operating system is to be The adjusted CPU is set to the idle state.
  • resource-adjusted device may be built in any one of the managed operating systems, or may exist independently of the managed operating system, which is not specifically limited in this embodiment.
  • the device provided in this embodiment determines the first operating system for resource adjustment, and after determining the CPU to be adjusted, sets the same as the access entry address of the first operating system for the CPU to be adjusted.
  • the address is raised to enable the CPU to be adjusted to perform bootstrapping according to the bootstrap address, and then join the scheduling management of the first operating system, thereby realizing dynamic adjustment of system resources without interrupting the service.
  • the resource adjustment device and the device provided by the foregoing embodiments implement resource adjustment, only the division of each functional module is used for example. In actual applications, the foregoing functions may be assigned different functions according to requirements.
  • the module is completed, dividing the internal structure of the device and the device into different functional modules to complete all or part of the functions described above.
  • the apparatus and the device for adjusting the resources provided by the foregoing embodiments are the same as the method for implementing the resource adjustment. The specific implementation process is described in detail in the method embodiment, and details are not described herein again.
  • serial numbers of the embodiments of the present invention are merely for the description, and do not represent the advantages and disadvantages of the embodiments.
  • a person skilled in the art may understand that all or part of the steps of implementing the above embodiments may be completed by hardware, or may be instructed by a program to execute related hardware, and the program may be stored in a computer readable storage medium.
  • the storage medium mentioned may be a read only memory, a magnetic disk or an optical disk or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种资源调整的方法及装置,属于通信技术领域。所述方法包括:确定资源调整的第一操作系统,并确定待调整的CPU;同时为待调整的CPU设置自举地址,使其根据自举地址进行自举;将待调整的CPU对应的CPU号发送给第一操作系统,使第一操作系统将CPU号对应的CPU加入第一操作系统的调度管理。本发明通过确定资源调整的第一操作系统,并在确定待调整的CPU后,为该待调整的CPU设置与第一操作系统的访问入口地址相同的自举地址,使该待调整的CPU能够根据该自举地址进行自举,进而加入第一操作系统的调度管理,从而在不中断业务的情况下实现了系统资源的动态调整。

Description

资源调整的方法及装置 本申请要求于 201 2 年 1 2 月 31 日提交的中国申请号为 2 01 2 1 0590461 . X、 发明名称为 "资源调整的方法及装置" 的中国申请 的优先权, 其全部内容通过引用结合在本申请中。 技术领域
本发明涉及通信技术领域, 特别涉及一种资源调整的方法及装 置。 背景技术
随着处理器技术的发展, 单纯提高处理器主频以增加处理能力已 发展到瓶颈, 各个服务器厂商纷纷通过采用 SMP ( Symmetrical Multi-Processing , 对称多处理) 系统来解决这一矛盾。 然而在某些特殊 领域, 如通讯领域, 在控制和转发分离的设计中, 往往会根据需要采用 异构系统进行差异化的作业分担处理。 因此, 基于 SMP的异构系统如何 进行资源调整是更合理分配计算资源,以较 、的代价实现多 CPU( Central Processing Unit , 中央处理单元) 资源的灵活部署的关键。
目前, 基于 SMP的异构系统通常采用静态方式部署资源, 如控制 面 /转发面的静态异构部署方式, SMP架构应用在控制面和转发面各自独 立部署异构的操作系统, 以便支持不同的应用对操作系统的不同诉求。 当为了适应在线的业务需求而进行资源调整时, 仅通过重启单板的方式 实现。
在实现本发明的过程中, 发明人发现现有技术至少存在以下缺点: 针对控制面在大量的智能手机应用的信令沖击等一些极端环境 下, CPU 资源占用率几乎接近 100% , 造成信令处理阻塞, 而负责语音 业务的转发面, 此时几乎无业务, CPU资源占用率接近 0% ,导致多 CPU 处理能力分配与预期不匹配, 则会出现一个系统负载过大, 而另外一个 系统过于闲置的情况, 因此, 通过重启单板的方式调整资源, 会导致较 长时间的业务中断。
发明 内 容
为了解决现有技术的问题, 本发明实施例提供了一种资源调整的 方法及装置。 所述技术方案如下:
第一方面, 提供了一种资源调整的方法, 所述方法包括: 确定资源调整的第一操作系统, 并确定待调整的中央处理单元
CPU;
为所述待调整的 CPU设置自举地址,使所述待调整的 CPU根据所 述自举地址进行自举, 所述自举地址与所述第一操作系统的访问入口地 址相同;
将所述待调整的 CPU对应的 CPU号发送给所述第一操作系统,使 所述第一操作系统将所述 CPU号对应的 CPU加入所述第一操作系统的 调度管理。
结合第一方面, 在第一种可能的实现方式中, 所述确定资源调整 的第一操作系统, 包括:
获取所管理的各个操作系统的资源信息, 根据所管理的各个操作 系统的资源信息确定资源调整的第一操作系统。
结合第一方面的第一种可能的实现方式, 在第二种可能的实现方 式中, 所述获取所管理的各个操作系统的资源信息, 包括:
每隔预设时间检测所管理的各个操作系统的资源占用情况, 根据 得到的检测结果获取所管理的各个操作系统的资源信息;
或者, 获取所管理的各个操作系统的资源信息记录, 根据所述资 源信息记录获取所管理的各个操作系统的资源信息。
结合第一方面的第二种可能的实现方式, 在第三种可能的实现方 式中, 所述每隔预设时间检测所管理的各个操作系统的资源占用情况, 根据检测结果得到所管理的各个操作系统的资源信息, 包括:
每隔预设时间向所管理的各个操作系统发送资源查询指令, 并接 收所管理的各个操作系统根据所述资源查询指令返回的资源占用情况, 根据所述资源占用情况得到所管理的各个操作系统的资源信息。 结合第一方面、 第一方面的第一种可能的实现方式、 第一方面的 第二种可能的实现方式、 第一方面的第三种可能的实现方式中的任一可 能的实现方式, 在第四种可能的实现方式中, 所述确定待调整的中央处 理单元 CPU之后, 还包括:
如果所述待调整的 CPU为非空闲状态,则向所述待调整的 CPU所 在的第二操作系统发送资源调整命令, 使所述第二操作系统将所述待调 整的 CPU设置为空闲状态。
第二方面, 提供了一种资源调整的装置, 所述装置包括:
第一确定模块, 用于确定资源调整的第一操作系统;
第二确定模块, 用于确定待调整的中央处理单元 CPU;
设置模块, 用于为所述第二确定模块确定的待调整的 CPU设置自 举地址, 使所述待调整的 CPU根据所述自举地址进行自举, 所述自举地 址与所述第一确定模块确定的第一操作系统的访问入口地址相同;
发送模块, 用于将所述第二确定模块确定的待调整的 CPU对应的 CPU号发送给所述第一确定模块确定的第一操作系统, 使所述第一操作 系统将所述 CPU号对应的 CPU加入所述第一操作系统的调度管理。
结合第二方面, 在第一种可能的实现方式中, 所述第一确定模块, 包括:
获取子模块, 用于获取所管理的各个操作系统的资源信息; 确定子模块, 用于根据所述获取子模块获取到的所管理的各个操 作系统的资源信息确定资源调整的第一操作系统。
结合第二方面的第一种可能的实现方式, 在第二种可能的实现方 式中, 所述获取子模块, 包括:
第一获取单元, 用于每隔预设时间检测所管理的各个操作系统的 资源占用情况, 根据得到的检测结果获取所管理的各个操作系统的资源 信息;
或者, 第二获取单元, 用于获取所管理的各个操作系统的资源信 息记录,根据所述资源信息记录获取所管理的各个操作系统的资源信息。
结合第二方面的第二种可能的实现方式, 在第三种可能的实现方 式中, 所述第一获取单元, 用于每隔预设时间向所管理的各个操作系统 发送资源查询指令, 并接收所管理的各个操作系统根据所述资源查询指 令返回的资源占用情况, 根据所述资源占用情况得到所管理的各个操作 系统的资源信息。
结合第二方面、 第二方面的第一种可能的实现方式、 第二方面的 第二种可能的实现方式、 第二方面的第三种可能的实现方式中的任一可 能的实现方式, 在第四种可能的实现方式中, 所述第二确定模块, 还用 于如果所述待调整的 CPU为非空闲状态, 则向所述待调整的 CPU所在 的第二操作系统发送资源调整命令, 使所述第二操作系统将所述待调整 的 CPU设置为空闲状态。
本发明实施例提供的技术方案带来的有益效果是:
通过确定资源调整的第一操作系统, 并在确定待调整的 CPU后, 为该待调整的 CPU 设置与第一操作系统的访问入口地址相同的自举地 址, 使该待调整的 CPU能够根据该自举地址进行自举, 进而加入第一操 作系统的调度管理, 从而在不中断业务的情况下实现了系统资源的动态 调整。 附 图 说明
为了更清楚地说明本发明实施例中的技术方案, 下面将对实施 例描述中所需要使用的附图作筒单地介绍, 显而易见地, 下面描述中 的附图仅仅是本发明的一些实施例, 对于本领域普通技术人员来讲, 在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图 1是本发明实施例一提供的一种资源调整的方法流程图; 图 2 是本发明实施例二提供的一种网络应用中实现资源调整的 过程示意图;
图 3是本发明实施例二提供的一种资源调整的方法流程图; 图 4是本发明实施例三提供的一种资源调整的装置结构示意图; 图 5是本发明实施例三提供的一种第一确定模块的结构示意图; 图 6是本发明实施例三提供的一种获取子模块的结构示意图。 具体实施方 式
为使本发明的目的、 技术方案和优点更加清楚, 下面将结合附图 对本发明实施方式作进一步地详细描述。 实施例一
本实施例提供了一种资源调整的方法, 参见图 1 , 本实施例提供的 方法流程具体如下:
101 : 确定资源调整的第一操作系统, 并确定待调整的 CPU;
102: 为待调整的 CPU设置自举地址, 使待调整的 CPU根据自举 地址进行自举;
其中待调整的 CPU的自举地址与第一操作系统的访问入口地址相 同。
103: 将待调整的 CPU对应的 CPU号发送给第一操作系统, 使第 一操作系统将 CPU号对应的 CPU加入第一操作系统的调度管理。
本实施例提供的方法, 通过确定资源调整的第一操作系统, 并在 确定待调整的 CPU后, 为该待调整的 CPU设置与第一操作系统的访问 入口地址相同的自举地址,使该待调整的 CPU能够根据该自举地址进行 自举, 进而加入第一操作系统的调度管理, 从而在不中断业务的情况下 实现了系统资源的动态调整。
为了更加清楚地阐述上述实施例提供的一种资源调整的方法, 结 合上述实施例的内容, 以如下实施例二为例, 对一种资源调整的方法进 行详细说明, 详见如下实施例二: 实施例二
本实施例提供了一种资源调整的方法, 为了便于说明, 本实施例 以图 2所示的网络应用中实现资源调整的过程中, 网络应用中包括控制 面及转发面,控制面操作系统管理任务 1、任务 2等任务,占用资源 CPU0、
CPU1、 CPU2; 转发面操作系统管理 BM0、 BM1 BM-S任务, 占 用资源 CPU3、 CPU4、 CPU5、 CPU6、 CPU7为例, 对本实施例提供的方 法进行详细地举例说明。 参见图 3 , 本实施例提供的方法流程具体如下:
301 : 获取所管理的各个操作系统的资源信息, 根据操作系统的资 源信息确定资源调整的第一操作系统;
针对此步骤, 本实施例不对获取所管理的各个操作系统的资源信 息的方式做具体限定, 包括如下两种方式中的任意一种:
第一种, 每隔预设时间检测所管理的各个操作系统的资源占用情 况, 根据得到的检测结果获取所管理的各个操作系统的资源信息; 例如, 每隔预设时间向所管理的各个操作系统发送资源查询指令, 并接收所管理的各个操作系统根据查询指令返回的资源占用情况, 根据 资源占用情况得到所管理的各个操作系统的资源信息。
具体的, 以图 2 ( a ) 为例, 每隔 3小时向所管理的控制面操作系 统和转发面操作系统发送资源查询指令, 并接收控制面操作系统和转发 面操作系统根据查询指令返回的资源占用情况, 根据资源占用情况得到 所管理的各个操作系统的资源信息。 其中, 预设时间除了以上述 3小时 为例外, 还可以为其他时间长度, 如 1 小时、 2小时等等, 本实施例不 对预设时间的长短进行限定。
第二种, 获取所管理的各个操作系统的资源信息记录, 并根据资 源信息记录获取管理的各个操作系统的资源信息。
其中, 资源信息记录可以是在之前检测各个操作系统的资源信 , ¾ 时得到的记录, 例如, 在按照上述第一种方式每次检测各个操作系统的 资源信息之后, 将检测结果进行存储, 得到资源信息记录。 当然, 该资 源信息记录还可以根据各个操作系统处理业务的时间段得到, 例如, 记 录各个操作系统处理业务的高峰期或低谷期, 以及在高峰期或低谷期处 理业务时的资源占用情况, 得到各个操作系统的资源信息记录。 当然, 除上述两种资源信息记录的获取方式外, 还可以存在其他获取资源信息 记录的方式, 本实施例对此不作具体限定, 保证能够根据资源信息记录 确定哪些操作系统需要进行资源调整即可。
具体的, 以获取图 2 ( a ) 中控制面操作系统和转发面操作系统的 资源信息记录, 且资源信息记录为控制面操作系统管理任务 1、 任务 2 等任务占用资源 CPU0、 CPU1、 CPU2; 转发面操作系统管理 BM0、
BM1 BM-S任务占用的资源 CPU3、 CPU4、 CPU5、 CPU6、 CPU7 为例, 则根据资源信息记录可分别获取控制面操作系统和转发面操作系 统的资源信息。
进一步地, 本实施例也不对资源调整的第一操作系统的确定原贝 'J 进行具体限定, 包括但不限于根据管理的各个操作系统 CPU占用率确定 资源调整的第一操作系统。 例如, 将 CPU占用率最高的操作系统确定为 资源调整的第一操作系统, 或者设定 CPU 占用率阈值, 将 CPU 占用率 最高并且 CPU 占用率大于设定的 CPU 占用率阈值的操作系统确定为资 源调整的第一操作系统。 仍以图 2 ( a ) 为例, 如果控制面操作系统 CPU占用率大于转发面 操作系统 CPU占用率, 则确定控制面为第一操作系统。
302: 确定待调整的 CPU;
针对此步骤, 由于对所管理的各个操作系统的 CPU使用情况、 状 态均有记录, 可以随时了解到各 CPU确切的使用情况, 所以可以根据拥 有的所管理的各个操作系统的 CPU使用情况记录确定待调整的 CPU。本 实施例不对待调整的 CPU确定方式进行具体限定, 包括但不限于将各个 操作系统均未使用的处于空闲状态的空闲状态 CPU作为待调整的 CPU, 或者曾经被操作系统占用但现在处于空闲状态的空闲状态 CPU 确定为 待调整的 CPU, 再或者将现在有操作系统占用但所占用的业务可以关闭 的非空闲状态 CPU确定为待调整的 CPU。
例如, 由于图 2 ( a ) 中的任务 BM0是可关闭任务, 则将 BM0所 占用的资源 CPU3确定为待调整的 CPU。
303: 判断待调整的 CPU 是否为空闲状态, 如果是空闲状态, 则 执行步骤 305 , 如果是非空闲状态, 则执行步骤 306;
针对此步骤,由于对所管理的各个操作系统的 C PU状态均有记录, 所以可以准确地了解待调整的 CPU是否为空闲状态,本实施例不对该步 骤的确定方式进行限定。
304: 向待调整的 CPU 所在的第二操作系统发送资源调整命令, 使第二操作系统将待调整的 CPU设置为空闲状态;
针对该步骤, 由于上述步骤 303中判断该待调整的 CPU处于非空 闲状态, 因而为了实现将其调整到第一操作系统的调度管理中, 可通过 其所在的第二操作系统将其设置为空闲状态, 从而后续实现将其从第二 操作系统中拔出, 以插入第一操作系统。
其中, 本实施例不对第二操作系统将待调整的 CPU设置为空闲状 态的方法做具体限定。 例如, 第二操作系统接收到资源调整命令后, 可 不再将任何代码运行在待调整的 CPU上, 使待调整的 CPU处于深度睡 眠, 从而进入空闲状态。
具体的, 以图 2 ( a ) 至图 2 ( c ) 过程为例, 图 2 ) 中 CPU3为 非空闲状态, 向 CPU3所在的转发面操作系统发送资源调整命令, 使转 发面操作系统关闭业务 BMO, CPU3上不再运行任何代码, 如图 2 ( b ) , 进而使 CPU3处于空闲状态, 如图 2 ( c ) 所示。 305: 为待调整的 CPU 设置与第一操作系统的访问入口地址相同 的自举地址, 使待调整的 CPU根据自举地址进行自举;
具体的, 本实施例不对为待调整的 CPU设置于第一操作系统的访 问入口地址相同的自举地址的方式进行限定。由于为待调整的 CPU设置 的自举地址与第一操作系统的访问入口地址相同, 因而该待调整的 CPU 可进行正确的自举流程, 从而能够通过后续步骤加入第一操作系统的调 度管理中, 实现该待调整的 CPU从第二操作系统到第一操作系统的资源 调整。 其中, 关于自举流程, 本实施例不作具体限定。
为了便于理解, 以将图 2 ( c ) 中 CPU3 的自举地址设置为控制面 操作系统的访问入口地址为例, CPU3 根据控制面操作系统的访问入口 地址进行自举,并设置 IPI( Inter-Processor Interrupt,处理器之间的中断) 中断处理, 以等待第一操作系统的 IPI 中断到来之后, 加入第一操作系 统的调度管理。
306: 将待调整的 CPU对应的 CPU号发送给第一操作系统, 使第 一操作系统将 CPU号对应的 CPU加入第一操作系统的调度管理。
针对该步骤,将待调整的 CPU对应的 CPU号发送给第一操作系统 后, 该第一操作系统即可向该 CPU号对应的 CPU发送 IPI中断,从而实 现将该 CPU号对应的 CPU能够加入第一操作系统的调度管理域中。
具体的, 已为图 ( c ) 中所示的 CPU3设置与控制面操作系统的 访问入口地址相同的自举地址, 该 CPU3按照该自举地址进行自举, 并 将 CPU3对应的 CPU号发送给控制面操作系统为例, 该控制面操作系统 通过向 CPU3发送 IPI中断, 实现将 CPU3加入控制面调度管理, 进入图 2 ( d ) 所示情况。
本实施例提供的方法, 通过确定资源调整的第一操作系统, 并在 确定待调整的 CPU后, 为该待调整的 CPU设置与第一操作系统的访问 入口地址相同的自举地址,使该待调整的 CPU能够根据该自举地址进行 自举, 进而加入第一操作系统的调度管理, 从而在不中断业务的情况下 实现了系统资源的动态调整。 实施例三
本实施例提供了一种资源调度的装置, 该装置用于执行上述实施 例一和施例二所提供的实现资源调整的方法, 参见图 4, 该装置包括: 第一确定模块 401 , 用于确定资源调整的第一操作系统; 第二确定模块 402, 用于确定待调整的中央处理单元 CPU;
设置模块 403 , 用于为第二确定模块 402确定的待调整的 CPU设 置自举地址, 使待调整的 CPU根据自举地址进行自举, 其中自举地址与 第一确定模块确定的第一操作系统的访问入口地址相同;
发送模块 404, 用于将第二确定模块 402确定的待调整的 CPU对 应的 CPU号发送给第一确定模块 401确定的第一操作系统,使第一操作 系统将 CPU号对应的 CPU加入所述第一操作系统的调度管理。
进一步地, 参见图 5 , 第一确定模块还包括:
获取子模块 4011 , 用于获取所管理的各个操作系统的资源信息; 确定子模块 4012,用于根据获取子模块 4011获取到的所管理的各 个操作系统的资源信息确定资源调整的第一操作系统。
进一步地, 参见图 6, 获取子模块还包括:
第一获取单元 40111 ,用于每隔预设时间向所管理的各个操作系统 发送资源查询指令, 并接收所管理的各个操作系统根据资源查询指令返 回的资源占用情况, 根据资源占用情况得到所管理的各个操作系统的资 源信息;
第二获取单元 40112 ,用于获取所管理的各个操作系统的资源信息 记录, 根据资源信息记录获取所管理的各个操作系统的资源信息。
其中第二确定模块 402,还用于如果待调整的 CPU为非空闲状态, 则向待调整的 CPU所在的第二操作系统发送资源调整命令,使第二操作 系统将待调整的 CPU设置为空闲状态。
需要说明的是, 该资源调整的装置可以内置于所管理的操作系统 中的任意一个操作系统中, 也可以在所管理的操作系统之外独立存在, 本实施例对此不作具体限定。
本实施例提供的装置, 通过确定资源调整的第一操作系统, 并在 确定待调整的 CPU后, 为该待调整的 CPU设置与第一操作系统的访问 入口地址相同的自举地址,使该待调整的 CPU能够根据该自举地址进行 自举, 进而加入第一操作系统的调度管理, 从而在不中断业务的情况下 实现了系统资源的动态调整。 实施例四 本实施例提供了一种资源调整的设备, 该设备包括: 处理器。
其中, 处理器, 用于确定资源调整的第一操作系统; 确定待调整 的 CPU; 为待调整的 CPU设置自举地址, 使待调整的 CPU根据其自举 地址进行自举, 其中自举地址与第一确定模块确定的第一操作系统的访 问入口地址相同; 将待调整的 CPU对应的 CPU号发送给第一操作系统, 使第一操作系统将 CPU号对应的 CPU加入所述第一操作系统的调度管 理。
进一步地, 处理器在确定资源调整的第一操作系统时, 用于获取 所管理的各个操作系统的资源信息, 根据所管理的各个操作系统的资源 信息确定资源调整的第一操作系统。
进一步地, 处理器在获取所管理的各个操作系统的资源信息时, 用于每隔预设时间检测所管理的各个操作系统的资源占用情况, 根据得 到的检测结果获取所管理的各个操作系统的资源信息; 或者, 获取所管 理的各个操作系统的资源信息记录, 根据资源信息记录获取所管理的各 个操作系统的资源信息。
进一步地, 处理器在每隔预设时间检测所管理的各个操作系统的 资源占用情况, 根据得到的检测结果获取所管理的各个操作系统的资源 信息时,用于每隔预设时间向所管理的各个操作系统发送资源查询指令, 并接收所管理的各个操作系统根据资源查询指令返回的资源占用情况, 根据资源占用情况得到所管理的各个操作系统的资源信息。
进一步地, 处理器在确定待调整的 CPU之后, 还用于如果待调整 的 CPU为非空闲状态, 则向待调整的 CPU所在的第二操作系统发送资 源调整命令, 使第二操作系统将待调整的 CPU设置为空闲状态。
需要说明的是, 该资源调整的设备可以内置于所管理的操作系统 中的任意一个操作系统中, 也可以在所管理的操作系统之外独立存在, 本实施例对此不作具体限定。
综上所述, 本实施例提供的设备, 通过确定资源调整的第一操作 系统, 并在确定待调整的 CPU后, 为该待调整的 CPU设置与第一操作 系统的访问入口地址相同的自举地址,使该待调整的 CPU能够根据该自 举地址进行自举, 进而加入第一操作系统的调度管理, 从而在不中断业 务的情况下实现了系统资源的动态调整。 需要说明的是: 上述实施例提供的资源调整的装置及设备在实现 资源调整时, 仅以上述各功能模块的划分进行举例说明, 实际应用中, 可以根据需要而将上述功能分配由不同的功能模块完成, 即将装置及设 备的内部结构划分成不同的功能模块, 以完成以上描述的全部或者部分 功能。 另外, 上述实施例提供的资源调整的装置及设备与实现资源调整 的方法实施例属于同一构思, 其具体实现过程详见方法实施例, 这里不 再赘述。
上述本发明实施例序号仅仅为了描述, 不代表实施例的优劣。 本领域普通技术人员可以理解实现上述实施例的全部或部分步骤 可以通过硬件来完成, 也可以通过程序来指令相关的硬件完成, 所述的 程序可以存储于一种计算机可读存储介质中, 上述提到的存储介质可以 是只读存储器, 磁盘或光盘等。
以上所述仅为本发明的较佳实施例, 并不用以限制本发明, 凡在 本发明的精神和原则之内, 所作的任何修改、 等同替换、 改进等, 均应 包含在本发明的保护范围之内。

Claims

权 利 要 求 书
1、 一种资源调整的方法, 其特征在于, 所述方法包括:
确定资源调整的第一操作系统, 并确定待调整的中央处理单元 CPU;
为所述待调整的 CPU设置自举地址, 使所述待调整的 CPU根据所述自举地 址进行自举, 所述自举地址与所述第一操作系统的访问入口地址相同;
将所述待调整的 CPU对应的 CPU号发送给所述第一操作系统, 使所述第一 操作系统将所述 CPU号对应的 CPU加入所述第一操作系统的调度管理。
2、 根据权利要求 1所述的方法, 其特征在于, 所述确定资源调整的第一操 作系统, 包括:
获取所管理的各个操作系统的资源信息, 根据所管理的各个操作系统的资 源信息确定资源调整的第一操作系统。
3、 根据权利要求 2所述的方法, 其特征在于, 所述获取所管理的各个操作 系统的资源信息, 包括:
每隔预设时间检测所管理的各个操作系统的资源占用情况, 根据得到的检 测结果获取所管理的各个操作系统的资源信息;
或者, 获取所管理的各个操作系统的资源信息记录, 根据所述资源信息记 录获取所管理的各个操作系统的资源信息。
4、 根据权利要求 3所述的方法, 其特征在于, 所述每隔预设时间检测所管 理的各个操作系统的资源占用情况, 根据检测结果得到所管理的各个操作系统 的资源信息, 包括:
每隔预设时间向所管理的各个操作系统发送资源查询指令, 并接收所管理 的各个操作系统根据所述资源查询指令返回的资源占用情况, 根据所述资源占 用情况得到所管理的各个操作系统的资源信息。
5、 根据权利要求 1至 4中任一权利要求所述的方法, 其特征在于, 所述确 定待调整的中央处理单元 CPU之后, 还包括:
如果所述待调整的 CPU为非空闲状态, 则向所述待调整的 CPU所在的第二
6、 一种资源调整的装置, 其特征在于, 所述装置包括:
第一确定模块, 用于确定资源调整的第一操作系统;
第二确定模块, 用于确定待调整的中央处理单元 CPU;
设置模块, 用于为所述第二确定模块确定的待调整的 CPU设置自举地址, 使所述待调整的 CPU根据所述自举地址进行自举, 所述自举地址与所述第一确 定模块确定的第一操作系统的访问入口地址相同;
发送模块, 用于将所述第二确定模块确定的待调整的 CPU对应的 CPU号发 送给所述第一确定模块确定的第一操作系统, 使所述第一操作系统将所述 CPU 号对应的 CPU加入所述第一操作系统的调度管理。
7、 根据权利要求 6所述的装置, 其特征在于, 所述第一确定模块, 包括: 获取子模块, 用于获取所管理的各个操作系统的资源信息;
确定子模块, 用于根据所述获取子模块获取到的所管理的各个操作系统的 资源信息确定资源调整的第一操作系统。
8、 根据权利要求 7所述的装置, 其特征在于, 所述获取子模块, 包括: 第一获取单元, 用于每隔预设时间检测所管理的各个操作系统的资源占用 情况, 根据得到的检测结果获取所管理的各个操作系统的资源信息;
或者, 第二获取单元, 用于获取所管理的各个操作系统的资源信息记录, 根据所述资源信息记录获取所管理的各个操作系统的资源信息。
9、 根据权利要求 8所述的装置, 其特征在于, 所述第一获取单元, 用于每 隔预设时间向所管理的各个操作系统发送资源查询指令, 并接收所管理的各个 操作系统根据所述资源查询指令返回的资源占用情况, 根据所述资源占用情况 得到所管理的各个操作系统的资源信息。
1 0、 根据权利要求 6至 9 中任一权利要求所述的装置, 其特征在于, 所述 第二确定模块, 还用于如果所述待调整的 CPU 为非空闲状态, 则向所述待调整 的 CPU所在的第二操作系统发送资源调整命令, 使所述第二操作系统将所述待 调整的 CPU设置为空闲状态。
PCT/CN2013/091165 2012-12-31 2013-12-31 资源调整的方法及装置 WO2014101892A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201210590461.XA CN103077081B (zh) 2012-12-31 2012-12-31 资源调整的方法及装置
CN201210590461.X 2012-12-31

Publications (1)

Publication Number Publication Date
WO2014101892A1 true WO2014101892A1 (zh) 2014-07-03

Family

ID=48153616

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2013/091165 WO2014101892A1 (zh) 2012-12-31 2013-12-31 资源调整的方法及装置

Country Status (2)

Country Link
CN (1) CN103077081B (zh)
WO (1) WO2014101892A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103077081B (zh) * 2012-12-31 2017-02-22 华为技术有限公司 资源调整的方法及装置
CN103699444B (zh) * 2013-12-17 2017-03-15 华为技术有限公司 中央处理器热插拔的实现方法及装置
CN104657218A (zh) * 2015-02-10 2015-05-27 西安酷派软件科技有限公司 一种多操作系统运行方法、装置及终端
CN112579177A (zh) * 2019-09-27 2021-03-30 宝能汽车集团有限公司 Hypervisor的CPU配置方法、系统以及车辆、存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050108714A1 (en) * 2003-11-18 2005-05-19 Geye Scott A. Dynamic resource management system and method for multiprocessor systems
CN101799772A (zh) * 2010-02-26 2010-08-11 上海华为技术有限公司 内核调度方法、内核备份方法和多核处理器
CN103077081A (zh) * 2012-12-31 2013-05-01 华为技术有限公司 资源调整的方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060123217A1 (en) * 2004-12-07 2006-06-08 International Business Machines Corporation Utilization zones for automated resource management

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050108714A1 (en) * 2003-11-18 2005-05-19 Geye Scott A. Dynamic resource management system and method for multiprocessor systems
CN101799772A (zh) * 2010-02-26 2010-08-11 上海华为技术有限公司 内核调度方法、内核备份方法和多核处理器
CN103077081A (zh) * 2012-12-31 2013-05-01 华为技术有限公司 资源调整的方法及装置

Also Published As

Publication number Publication date
CN103077081A (zh) 2013-05-01
CN103077081B (zh) 2017-02-22

Similar Documents

Publication Publication Date Title
US8424007B1 (en) Prioritizing tasks from virtual machines
CN103458036B (zh) 一种集群文件系统的访问装置和方法
JP6818014B2 (ja) ジョブ用の動作リトライ方法及び機器
US20060010446A1 (en) Method and system for concurrent execution of multiple kernels
US9798584B1 (en) Methods and apparatus for IO sizing based task throttling
WO2016165472A1 (zh) 一种创建虚拟机的方法和装置
CN109688191B (zh) 流量调度方法及通信装置
CN113010275B (zh) 一种中断处理方法和装置
EP3680787A1 (en) Method for synchronization between primary database and standby database, database system and device
WO2012113232A1 (zh) 调整时钟中断周期的方法和装置
WO2014101892A1 (zh) 资源调整的方法及装置
US9128754B2 (en) Resource starvation management in a computer system
JP2015530679A (ja) 高効率アトミック演算を使用した方法および装置
JP5014179B2 (ja) Os優先度変更装置及びos優先度変更プログラム
CN109933549B (zh) 一种适用于risc-v处理器的中断控制器
US11243603B2 (en) Power management of an event-based processing system
TW201837767A (zh) 監控管理系統及方法
CN109426563B (zh) 一种进程管理方法及装置
WO2022237419A1 (zh) 任务执行方法、装置及存储介质
JP2017062540A (ja) 片方向オペレーティングシステム間通信システム及びプログラム
JP5676664B2 (ja) リソース管理装置、リソースの管理方法、及びプログラム
CN106484536B (zh) 一种io调度方法、装置和设备
US10901784B2 (en) Apparatus and method for deferral scheduling of tasks for operating system on multi-core processor
CN112988365B (zh) 一种线程管理方法、装置、设备及介质
US20220206840A1 (en) Timer Processing Method, Apparatus, Electronic Device and Computer Storage Medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13868737

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13868737

Country of ref document: EP

Kind code of ref document: A1