CN105528199A - 一种节点的处理方法及装置 - Google Patents

Abstract

本发明公开一种节点的处理方法及装置，涉及通信网络技术领域，可以解决在执行处理器热添加操作和内存热添加操作时，操作系统长时间处理性能较低的问题。本发明通过上电之后的待添加节点从Flash芯片中获取热添加代码，将通过运行该热添加代码执行QPI初始化得到的QPI初始化数据提供给SMM？Monarch，然后根据SMM？Monarch发送的内存初始化命令执行内存初始化，将得到的内存初始化数据提供给SMM？Monarch。本发明实施例提供的方案适于对节点进行添加时采用。

Description

一种节点的处理方法及装置

技术领域

本发明涉及通信网络技术领域，尤其涉及一种节点的处理方法及装置。

背景技术

目前，为了维持操作系统中承载关键业务的服务器能够长时间保持正常运行，需要对服务器中的处理器和内存进行热添加操作，从而使服务器中出现不可纠正错误的频率小于等于正常值。

现有的对处理器和内存进行热添加的操作都是在SMM(SystemManagementMode，系统管理模式)中完成的。在进行热添加操作时，SMMMonarch(SystemManagementModeMonarch，系统管理模式主逻辑处理器)来负责执行处理器热添加操作和内存热添加操作(下述统一称为热添加操作)，在此过程中，服务器中的其他逻辑处理器在SMM中等待SMMMonarch完成热添加操作后一起退出SMM。然而，在所有的逻辑处理器退出SMM之前，服务器中的操作系统会因为被长时间挂起而失去响应。

现有的时间分片技术将热添加操作切分为若干热添加操作片段(每个热添加操作片段的执行时间至多只有几十毫秒)，使得在执行热添加操作时服务器处于SMM和保护模式两种。在SMM下SMMMonarch执行至少一个热添加操作片段的热添加操作，在保护模式下服务器中的所有处理器退出SMM，然后通过状态机记录热添加操作的当前状态，使得下一次热添加操作从记录的当前状态继续进行。通过时间分片技术可以将热添加操作分成一个个独立的时间段与保护状态穿插运行来保证操作系统不会长时间失去响应。

但是，对于现有技术而言，在SMMMonarch执行热添加操作中的初始化时，需要对待添加节点内的处理器逐个进行QPI(QuickPathInterconnect，快速通道互联)初始化和对待添加节点内的内存逐个进行内存初始化，当需要添加的处理器数量较多时，例如需要一次性增加一整个节点时，执行QPI初始化和内存初始化的耗时过长，从而导致了操作系统长时间处于处理性能低下的状态。这里的待添加节点可以看作QPI域。

发明内容

本发明的实施例提供一种节点的处理方法及装置，可以解决在执行处理器热添加操作和内存热添加操作时，操作系统长时间处理性能较低的问题。

第一方面，本发明的实施例提供一种节点的处理方法，所述方法应用于待添加节点，所述待添加节点为向多处理器系统进行热添加操作的节点，所述多处理器系统包括已用节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器，所述已用节点内包括通过QPI链路互联的已运行的处理器，所述方法包括：

上电之后的待添加节点从Flash芯片中获取热添加代码；

所述待添加节点通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，其中所述QPI初始化包括建立所述待添加节点中的各个处理器的互联配置；

所述待添加节点将所述QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为所述已用节点中的逻辑处理器；

所述待添加节点接收到所述SMMMonarch发送的内存初始化命令后执行内存初始化，得到内存初始化数据，所述内存初始化包括对所述待添加节点内各个内存的上电自检和内存配置；

所述待添加节点将所述内存初始化数据提供给所述SMMMonarch。

在第一种可能的实施例中，结合第一方面，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

在所述待添加节点从Flash芯片中获取热添加代码之后，所述方法还包括：

所述PBSP通过运行所述热添加代码进行处理器初始化，所述处理器初始化包括对所述待添加节点内各个处理器的上电自检和初始化配置；

所述待添加节点通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，包括：

所述SBSP通过运行所述热添加代码执行所述QPI初始化，得到所述QPI初始化数据。

在第二种可能的实施例中，结合第一方面中的第一种可能的实施例，所述待添加节点从Flash芯片中获取热添加代码，包括：

所述PBSP从所述待添加节点对应的Flash芯片中获取各自的热添加代码；或者，

所述PBSP从与处理器连接设备连接的Flash芯片中获取所述处理器连接设备对应的热添加代码，所述处理器连接设备为将所述多处理器系统中的所述已用节点和所述待添加节点进行互连的设备。

在第三种可能的实施例中，结合第一方面中的第一种可能的实施例或第一方面中的第二种可能的实施例，在所述待添加节点将进行所述QPI初始化的QPI初始化数据发送给系统管理模式主逻辑处理器SMMMonarch之后，所述方法还包括：

所述SBSP退化成进化之前的PBSP；

所述待添加节点接收所述SMMMonarch发送的内存初始化命令；根据所述内存初始化命令执行内存初始化，得到内存初始化数据，包括：

所述待添加节点中的每个PBSP分别接收所述SMMMonarch发送的所述内存初始化命令；

所述待添加节点中的每个PBSP根据所述内存初始化命令执行各自的内存初始化，得到各自的内存初始化数据。

第二方面，本发明的实施例提供一种节点的处理方法，包括：

所述方法应用于系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为已用节点中的逻辑处理器，所述已用节点处于多处理器系统中，所述方法包括：

所述SMMMonarch接收系统管理中断SMI指示，所述SMI指示用于指示向所述多处理器系统中热添加待添加节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器；

所述SMMMonarch获取所述待添加节点提供的QPI初始化数据，所述QPI初始化数据为所述待添加节点通过QPI初始化得到的数据，所述QPI初始化包括建立所述待添加节点中的各个处理器间的互联配置；

所述SMMMonarch向所述待添加节点发送内存初始化命令，所述内存初始化命令用于指示所述待添加节点执行内存初始化，所述内存初始化包括对所述待添加节点内各个内存的上电自检和内存配置；

所述SMMMonarch获取所述待添加节点提供的内存初始化数据。

在第一种可能的实施例中，结合第二方面，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

所述SMMMonarch获取所述待添加节点提供的QPI初始化数据，包括：

所述SMMMonarch检测到所述待添加节点完成所述QPI初始化之后，获取所述SBSP提供的QPI初始化数据。

在第二种可能的实施例中，结合第二方面中的第一种可能的实施例，所述SMMMonarch获取所述待添加节点提供的内存初始化数据，包括：

所述SMMMonarch检测到所述待添加节点完成所述内存初始化之后，获取所述待添加节点的每个PBSP提供的内存初始化数据。

第三方面，本发明的实施例提供一种节点的处理装置，所述装置应用于待添加节点，所述待添加节点为向多处理器系统进行热添加操作的节点，所述多处理器系统包括已用节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器，所述已用节点内包括通过QPI链路互联的已运行的处理器，所述装置包括：

获取模块，用于从Flash芯片中获取热添加代码，并将所述热添加代码提供给第一初始化模块；

所述第一初始化模块，用于通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，并将所述QPI初始化数据提供给共享模块，其中所述QPI初始化包括建立所述待添加节点中的各个处理器的互联配置；

所述共享模块，用于将所述QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为所述已用节点中的逻辑处理器；

接收模块，用于接收所述SMMMonarch发送的内存初始化命令，并将所述内存初始化命令提供给第二初始化模块；

所述第二初始化模块，用于通过所述内存初始化命令执行内存初始化，得到内存初始化数据，并将所述内存初始化数据提供给所述共享模块，所述内存初始化包括对所述待添加节点内各个内存模块的上电自检和内存配置；

所述共享模块，还用于将所述内存初始化数据提供给所述SMMMonarch。

在第一种可能的实施例中，结合第三方面，所述第二初始化模块，还用于通过所述热添加代码进行处理器初始化，所述处理器初始化包括对所述待添加节点内各个处理器的上电自检和初始化配置。

在第二种可能的实施例中，结合第三方面中的第一种可能的实施例，所述获取模块，具体用于从所在装置对应的Flash芯片中获取所述热添加代码；或者，用于从与处理器连接设备连接的Flash芯片中获取所述热添加代码，所述处理器连接设备为将所述多处理器系统中的所述已用节点和所述待添加节点进行互连的设备。

第四方面，本发明的实施例提供一种节点的处理装置，包括：

所述装置应用于系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为已用节点中的逻辑处理器，所述已用节点处于多处理器系统中，所述装置包括：

接收模块，用于接收系统管理中断SMI指示，所述SMI指示用于指示向所述多处理器系统中热添加待添加节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器；

获取模块，用于获取所述待添加节点提供的QPI初始化数据，所述QPI初始化数据为所述待添加节点通过QPI初始化得到的数据，所述QPI初始化包括建立所述待添加节点中的各个处理器间的互联配置；

发送模块，用于向所述待添加节点发送内存初始化命令，所述内存初始化命令用于指示所述待添加节点执行内存初始化，所述内存初始化包括对所述待添加节点内各个内存模块的上电自检和内存配置；

所述获取模块，还用于获取所述待添加节点提供的内存初始化数据。

在第一种可能的实施例中，结合第四方面，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

所述装置还包括：检测模块，

所述检测模块，用于检测所述待添加节点是否完成所述QPI初始化；

所述获取模块，还用于在所述检测模块检测到所述待添加节点完成所述QPI初始化之后，获取所述SBSP提供的QPI初始化数据。

在第二种可能的实施例中，结合第四方面中的第一种可能的实施例，所述检测模块，还用于检测所述待添加节点是否完成所述内存初始化；

所述获取模块，还用于在所述检测模块检测到所述待添加节点完成所述内存初始化之后，获取所述待添加节点的每个PBSP提供的内存初始化数据。

本发明实施例提供的一种节点的处理方法及装置。现有技术中在热添加操作中，单次添加操作只能热添加单个处理器或者单个内存，这导致现有技术在热添加一整个节点时，添加过程耗时过长，从而引起了操作系统长时间处于处理性能低下的状态的问题。

本发明可以对待添加节点内包括的处理器并行执行处理器热添加操作，或对待添加节点内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作。具体为：从Flash芯片中获取热添加代码，将通过该热添加代码执行QPI初始化得到的QPI初始化数据提供给SMMMonarch，然后根据SMMMonarch发送的内存初始化命令执行内存初始化，将得到的内存初始化数据提供给SMMMonarch，可以实现多个处理器并行热添加，或者处理器和内存并行添加，进而提高了操作系统处理性能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例适用的一种XNC系统的逻辑结构示意图；

图2为本发明实施例提供的一种节点的处理方法的流程图；

图3(a)为本发明实施例适用的另一种XNC系统的逻辑结构示意图；

图3(b)为本发明实施例适用的又一种XNC系统的逻辑结构示意图；

图4为本发明实施例提供的另一种节点的处理方法的流程图；

图5为本发明实施例提供的又一种节点的处理方法的流程图；

图6为本发明实施例提供的一种节点的处理装置的逻辑结构示意图；

图7为本发明实施例提供的另一种节点的处理装置的逻辑结构示意图；

图8为本发明实施例提供的又一种节点的处理装置的逻辑结构示意图；

图9为本发明实施例提供的一种节点的处理装置的硬件结构图；

图10为本发明实施例提供的另一种节点的处理装置的硬件结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本发明保护的范围。

本发明应用于将待添加节点添加到多处理器系统中，多处理器系统中包括已用节点，其中已用节点为在多处理器系统中已运行的节点，待添加节点为向多处理器系统进行热添加操作的节点，待添加节点内包括通过QPI(QuickPathInterconnect，快速通道互联)链路互联的处理器。已用节点内包括通过QPI链路互连的已运行的处理器。

需要说明的是，将待添加节点添加到多处理器系统中包括2个主要步骤：(1)被添加对象的初始化，被添加对象包括CPU，或者CPU和内存的整体；(2)SMMMonarch初始化。现有技术中被添加对象初始化的过程占用时间过程，导致了整个系统的效率低下，而本发明通过并行初始化的方式，缩短了被添加对象初始化的时间，提高了系统总体效率。

在多处理器系统中，通过QPI链路将多个处理器，或者多个处理器与内存的集合划分为不同的节点(该节点包括已用节点和待添加节点)。已用节点和待添加节点之间可以直接互联，也可以通过处理器连接设备来进行互连(此时多处理器系统可还包括处理器连接设备)，即处理器连接设备为将多处理器系统中的已用节点和待添加节点进行互连的设备。如处理器连接设备可以为XNC(eXtendedNodeController，扩展节点控制器)。

需要说明的是，在本发明中多处理器系统可以为XNC系统、ccNUMA(cache-coherentNonUniformMemoryAccess，连贯缓冲非统一内存寻)系统等。如多处理器系统为XNC系统时，XNC系统中的多个处理器以及多个内存可以通过XNC进行相互连接。XNC系统中的多个处理器和多个内存通过QPI链路划分成不同的QPI域(本发明将QPI域看作节点)，即每个QPI域内包括通过QPI链路互联的多个处理器，还可以包括和处理器连接的内存。每个XNC连接一个QPI域，以及连接其余的XNC，多个由XNC连接的QPI域形成一个XNC系统。当然，将多处理器系统中的多个处理器以及多个内存划分为不同QPI域(节点)的方式不限于QPI链路这一种。只要具有与QPI链路类似划分手段的方式均可。

如图1所示，本发明适用于一种XNC系统。在该XNC系统中已有节点为QPI域0、QPI域1和QPI域3，将要进行热添加操作的待添加节点为QPI域2。本实施例中，每个QPI域内包括4个处理器(CPU(CentralProcessingUnit，中央处理器))以及若干内存。每个处理器含有三个QPI接口，每个QPI域中的4个处理器通过两个QPI接口连接成环，第三个QPI接口连接至XNC。每个QPI域内都至少有一个PCH(PlatformControlHub，网络控制中心)，PCH俗称南桥。相互连接的四个XNC以及每个XNC分别连接的一个QPI域组成XNC系统。多个XNC形成一个XNC网络。

需要说明的是，图1中各个装置仅仅是示意，每个QPI域中的处理器数量不限于4个。每个QPI域内处理器互联拓扑可以是任意的。XNC网络中每个XNC之间互联也是任意的。QPI域与XNC网络中的XNC的互联拓扑也是任意的，比如，一个QPI域可以链接两个XNC。

以及，不仅仅只有一个待添加节点(QPI域2)，也可以同时有多个需要执行热添加操作的待添加节点(QPI域)。

结合图1，本发明提供一种节点的处理方法，如图2所示，该方法应用于将待添加节点热添加到多处理器系统中，多处理器系统包括已用节点，待添加节点内包括通过QPI链路互联的处理器，已用节点内包括通过QPI链路互联的已运行的处理器，该方法具体如下：

201，上电之后的待添加节点从Flash芯片中获取热添加代码。

从图1中可以看出，待添加节点为QPI域2。

其中，Flash芯片内含有热添加代码。在本发明中，热添加代码可以为BIOS(BasicInputOutputSystem，基本输入输出系统)启动代码、UEFI(UnifiedExtensibleFirmwareInterface，统一可扩展固件接口)启动代码等。

202，待添加节点通过运行热添加代码执行QPI初始化，得到QPI初始化数据，其中QPI初始化包括建立待添加节点中的各个处理器的互联配置。

其中，待添加节点执行QPI初始化可以包括建立处理器间的QPI链路，处理器路由，缓存一致性等配置。

QPI初始化数据可以包括QPI的端口信息、带宽、速率、数据校验模式等。

203，待添加节点将QPI初始化数据提供给SMMMonarch，SMMMonarch为已用节点中的逻辑处理器。

在本发明中SMMMonarch是通过特定规则生成的逻辑处理器。特定规则可包括①根据编号确定SMMMonarch，其中编号为已用节点内包括的逻辑处理器的编号；②根据选举代码确定SMMMonarch，其中已用节点内包括的逻辑处理器运行选举代码，谁先运行完选举代码，谁即为SMMMonarch。

204，待添加节点接收到SMMMonarch发送的内存初始化命令后执行内存初始化，得到内存初始化数据，内存初始化包括对待添加节点内各个内存的上电自检和内存配置。

可选的，待添加节点内包括通过QPI链路互联的处理器，或者待添加节点内包括内存和通过QPI链路互联的处理器。

具体的，内存初始化数据包括两种情况。当待添加节点内包括内存时，内存初始化数据包括内存的容量、速率、分配到的地址范围等。当待添加节点内不包括内存时，待添加节点得到的内存初始化数据中的数据为零。

205，待添加节点将内存初始化数据提供给SMMMonarch。

本发明可以通过待添加节点对其内包括的处理器并行执行处理器热添加操作，或对其内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作。具体为：从Flash芯片中获取热添加代码，将通过该热添加代码执行QPI初始化得到的QPI初始化数据提供给SMMMonarch，然后根据SMMMonarch发送的内存初始化命令执行内存初始化，将得到的内存初始化数据提供给SMMMonarch，可以实现多个处理器并行热添加，或者处理器和内存并行添加，从而提高了操作系统处理性能。

进一步，待添加节点中的每个处理器包括一个PBSP(PackageBootStrapProcessor，包启动处理器)，即在待添加节点包括N个处理器时，待添加节点包括N个PBSP，N≥2。具体的，待添加节点中的每个处理器内部有多个逻辑处理器，在待添加节点从Flash芯片中获取到热添加代码之后，待添加节点中的每个处理器通过特定规则生成一个PBSP(即从处理器包括的多个逻辑处理器中选举一个PBSP)，这里的特定规则与生成SMMMonarch所用的规则相同，在此不再一一赘述。PBSP通过运行热添加代码完成对各自处理器的处理器初始化(如图1所示，QPI域2中包括4个CPU，则QPI域2包括4个PBSP)。处理器初始化包括对待添加节点内各个处理器的上电自检和初始化配置。

其中，初始化配置可以包括对I/O地址空间的配置、对Cache(高速缓冲存储器)的配置。

在每个PBSP对所在处理器执行完处理器初始化之后，从待添加节点中的所有PBSP中选举出一个SBSP(SystemBootStrapProcessor，系统启动处理器)。即将待处理节点中的任意一个PBSP进化为SBSP。其中，PBSP进化为SBSP的规则依然采用上述描述的特定规则即可。可以理解的是，每一个需要进行热添加操作的QPI域对应一个SBSP。然后在确定了SBSP之后，SBSP通过运行热添加代码执行QPI初始化，得到QPI初始化数据。

进一步的，在步骤201中，待添加节点获取热添加代码的方式有多种，本发明提供其中两种获取方式。

第一种方式，PBSP从待添加节点对应的Flash芯片中获取各自的热添加代码。如图3(a)所示，每个QPI域内的PCH的下游挂载Flash芯片。Flash芯片中包括该热添加代码。

第二种方式，PBSP从与XNC(处理器连接设备)连接的Flash芯片中获取XNC对应的热添加代码。如图3(b)所示，Flash芯片不再挂载在PCH下游，而是直接挂载在XNC上，图3(b)中Flash芯片挂载在XNC0上，但是本发明不限制Flash芯片挂载的具体位置以及具体范围。比如，Flash芯片还可以挂载在XNC1上，或者Flash芯片在XNC0、XNC1和XNC2上均有挂载。

进一步，在步骤203中，也就是SBSP需要将QPI初始化数据提供给SMMMonarch，SBSP将QPI初始化数据存放在SMMMonarch与待添加节点(SBSP)共享的共享数据结构体或者共享寄存器内。其中，每个SBSP对应一个共享数据结构体或者共享寄存器。可选的，共享数据结构可以为Host。

进一步的，在步骤203之后，SBSP退化为进化之前的PBSP。也就是SBSP将进行QPI初始化的QPI初始化数据发送给SMMMonarch之后，退化成进化之前的PBSP。

进一步的，在SMMMonarch获取到QPI初始化数据之后，会向待添加节点中的PBSP发送内存初始化命令。

可选的，SMMMonarch依次向每个PBSP下发内存初始化命令。

每个PBSP分别接收SMMMonarch发送的内存初始化命令；然后根据内存初始化命令执行各自的内存初始化，得到每个PBSP对应的内存初始化数据；再将各自的内存初始化数据提供给SMMMonarch。

其中每个PBSP将得到的内存初始化数据存放在所在待添加节点的SBSP(此时已退化为进化之前的PBSP)对应的共享数据结构体或者共享寄存器中。

结合图1，本发明还提供一种节点的处理方法，如图4所示，该方法应用于SMMMonarch，SMMMonarch为已用节点中的逻辑处理器，已用节点处于多处理器系统中，该方法包括：

401，SMMMonarch接收SMI(SystemManagementInterrupt，系统管理中断)指示，SMI指示用于指示向多处理器系统中热添加待添加节点，待添加节点为向多处理器系统进行热添加操作的节点，待添加节点内包括通过快速通道互联QPI链路互联的处理器。

用户触发节点热添加事件后，该触发动作导致产生一个SMI中断(可看作SMMMonarch接收SMI指示)。然后SMMMonarch通过用于检测中断类型的接口检测此次SMI中断是否为热添加请求，当检测到此次SMI中断为热添加请求时，指示待添加节点执行热添加操作。

其中，SMMMonarch接收到SMI指示之后，将待添加节点内所有处理器进行上电。

402，SMMMonarch获取待添加节点提供的QPI初始化数据，QPI初始化数据为待添加节点通过QPI初始化得到的数据，QPI初始化包括建立待添加节点中的各个处理器间的互联配置。

可以理解的是，待添加节点为图1中需要进行热添加操作的QPI域2。

403，SMMMonarch向待添加节点发送内存初始化命令，内存初始化命令用于指示待添加节点执行内存初始化，内存初始化包括对待添加节点内各个内存的上电自检和内存配置。

404，SMMMonarch获取待添加节点提供的内存初始化数据。

本发明实施例提供的一种节点的处理方法，本发明通过SMMMonarch在接收到SMI指示之后，指示待添加节点执行热添加操作，然后获取待添加节点通过QPI初始化得到的QPI初始化数据，以及获取待添加节点通过SMMMonarch下发的内存初始化命令执行内存初始化而得到的内存初始化数据，使得在多处理器系统进行热添加操作时，直接由待添加节点对自身包括的处理器执行热添加操作和对自身包括的内存执行内存热添加操作，避免了SMMMonarch对待添加节点内包括的多个处理器/多个处理器和多个内存执行单次添加操作，从而节约了添加过程的时间，进而提高了操作系统处理性能。

进一步的，在步骤401之后，SMMMonarch将待添加节点内的所有处理器进行上电，以便于上电之后的待添加节点通过运行热添加代码执行处理器初始化和QPI初始化等操作。

进一步的，在步骤402中，SMMMonarch在获取QPI初始化数据时，需要检测待添加节点是否完成QPI初始化。可选的，SMMMonarch通过在共享数据结构体(如Host)或者共享寄存器中查询对应QPI初始化数据变量值的设置来检测待添加节点是否完成QPI初始化。当变量值从False变到True，SMMMonarch可以确定共享数据结构体或者共享寄存器中已存放QPI初始化数据。

进一步可选的，在检测到待添加节点完成QPI初始化之后，SMMMonarch从SBSP对应的共享数据结构体或者共享寄存器中获取该QPI初始化数据。

对应步骤404，SMMMonarch在获取内存初始化数据时，需要检测待添加节点是否完成内存初始化。可选的，SMMMonarch通过查询对应QPI初始化数据变量值的设置来检测待添加节点是否完成内存初始化。当变量值从False变到True，SMMMonarch可以确定共享数据结构体或者共享寄存器中已存放所有待添加节点对应的内存初始化数据。

进一步可选的，在检测到待添加节点完成内存初始化之后，SMMMonarch从待添加节点(SBSP)对应的共享数据结构体或者共享寄存器中获取每个PBSP存放的内存初始化数据。

进一步的，结合图1-图4，本发明还可以提供一种节点的处理方法，如图5所示，该方法如下：

501，SMMMonarch接收SMI指示，根据该SMI指示待添加节点执行热添加操作。

在本步骤中，该热添加操作包括处理器初始化、QPI初始化、内存初始化。

502，待添加节点中的每个PBSP从Flash芯片中获取热添加代码，并根据该热添加代码执行处理器初始化。

503，待添加节点中的任意一个PBSP进化为SBSP。

504，在执行完处理器初始化之后，待添加节点中的SBSP通过热添加代码执行QPI初始化，得到QPI初始化数据，然后将QPI初始化数据提供给SMMMonarch。

505，SMMMonarch获取SBSP提供的QPI初始化数据。

506，SBSP退化为进化之前的PBSP。

507，SMMMonarch向待添加节点中的每个PBSP发送内存初始化命令。

508，每个PBSP根据内存初始化命令执行内存初始化，得到内存初始化数据，并提供给SMMMonarch。

509，SMMMonarch获取每个PBSP提供的内存初始化数据。

进一步说明的是，在待添加节点执行完处理器热添加操作和内存热添加操作之后，SMMMonarch继续之后剩余的初始化。其中剩余的初始化包括多处理器相关的初始化，SMM初始化等。

本发明可以对待添加节点内包括的处理器并行执行处理器热添加操作，或对待添加节点内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作，从而提高了操作系统处理性能。

结合上述图1、图2、图3(a)、图3(b)和图5，本发明提供一种节点的处理装置60，如图6所示，该装置60应用于待添加节点，待添加节点为向多处理器系统进行热添加操作的节点，多处理器系统包括已用节点，待添加节点内包括通过QPI链路互联的处理器，已用节点内包括通过QPI链路互联的已运行的处理器，该装置60包括获取模块601，第一初始化模块602，共享模块603，接收模块604，第二初始化模块605。

具体的，获取模块601，用于从Flash芯片中获取热添加代码，并将热添加代码提供给第一初始化模块602，热添加代码用于进行热添加操作。

第一初始化模块602，用于通过热添加代码执行QPI初始化，得到QPI初始化数据，并将QPI初始化数据提供给共享模块603，其中QPI初始化包括建立待添加节点中的各个处理器的互联配置。

共享模块603，用于将QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，SMMMonarch为用于控制待添加节点的处于可用资源的处理器。

接收模块604，用于接收SMMMonarch发送的内存初始化命令，并将内存初始化命令提供给第二初始化模块605，内存初始化命令用于指示待添加节点执行内存初始化。

第二初始化模块605，用于根据内存初始化命令执行内存初始化，得到内存初始化数据，并将内存初始化数据提供给共享模块603，内存初始化包括对进行待添加节点内各个内存的上电自检和内存配置。

共享模块603，还用于将内存初始化数据提供给SMMMonarch。

进一步的，在第一初始化模块602进行QPI初始化之前，第二初始化模块605通过热添加代码进行处理器初始化，处理器初始化包括待添加节点内各个处理器的上电自检和初始化配置。

进一步的，获取模块601具体从所在装置对应的Flash芯片中获取热添加代码；或者，从与处理器连接设备连接的Flash芯片中获取热添加代码，处理器连接设备为将多处理器系统中的已用节点和待添加节点进行互连的设备。

本发明可以对待添加节点内包括的处理器并行执行处理器热添加操作，或对待添加节点内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作，从而提高了操作系统处理性能。

结合上述图1、图4、图3(a)、图3(b)和图5，本发明提供一种节点的处理装置70，该装置70应用于SMMMonarch，SMMMonarch为已用节点中的逻辑处理器，已用节点处于多处理器系统中，如图7所示，该装置70包括接收模块701，获取模块702，发送模块703。

具体的，接收模块701，用于接收系统管理中断SMI指示，通过SMI指示向所述多处理器系统中热添加待添加节点，待添加节点内包括通过QPI链路互联的处理器。

可以理解的是，待添加节点可以为图1所示的QPI域2。

在待添加节点执行热添加操作中的QPI初始化得到QPI初始化数据之后，获取模块702，用于获取待添加节点提供的QPI初始化数据，QPI初始化数据为待添加节点通过QPI初始化得到的数据，QPI初始化包括建立待添加节点中的各个处理器间的互联配置。

在获取模块702获取到QPI初始化数据之后，发送模块703，用于向待添加节点发送内存初始化命令，内存初始化命令用于指示待添加节点执行内存初始化，内存初始化包括对待添加节点内各个内存的上电自检和内存配置。

在待添加节点通过内存初始化命令执行内存初始化，并得到内存初始化数据之后，获取模块702，还用于获取待添加节点提供的内存初始化数据。

进一步可选的，如图8所示，本发明还可以提供一种节点的处理装置80，该装置80还包括检测模块704。

检测模块704，用于检测待添加节点是否完成QPI初始化。

然后获取模块702在检测模块704检测到待添加节点完成QPI初始化之后，获取每个待添加节点的SBSP提供的SBSP对应的QPI初始化数据。其中，待添加节点包括SBSP和至少一个PBSP，其中，SBSP为任意一个PBSP进化得到的逻辑处理器。

进一步的，检测模块704，还用于检测待添加节点是否完成内存初始化。在检测模块704检测到待添加节点完成内存初始化之后，获取模块702，还用于获取每个待添加节点的PBSP提供的每个待添加节点的PBSP对应的内存初始化数据。

本发明可以通过对待添加节点对其内包括的处理器并行执行处理器热添加操作，或对其内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作。从而实现多个处理器并行热添加，或者处理器和内存并行添加，进而提高了操作系统处理性能。

如图9所示，图9为节点的处理装置的硬件结构示意图。该装置应用于待添加节点，待添加节点为向多处理器系统进行热添加操作的节点，多处理器系统包括已用节点，待添加节点内包括通过快速通道互联QPI链路互联的处理器，已用节点内包括通过QPI链路互联的已运行的处理器，其中，节点的处理装置90可包括存储器901、接收器902和处理器集合903。

存储器901可以是只读存储器(ReadOnlyMemory，ROM)，静态存储设备，动态存储设备或者随机存取存储器(RandomAccessMemory，RAM)。存储器901可以存储操作系统和其他应用程序。在通过软件或者固件来实现本发明实施例提供的技术方案时，用于实现本发明实施例提供的技术方案的程序代码保存在存储器901中，并由处理器集合903来执行。

接收器902用于装置与其他设备或通信网络(例如但不限于以太网，无线接入网(RadioAccessNetwork，RAN)，无线局域网(WirelessLocalAreaNetwork，WLAN)等)之间的通信。对于本发明，处理器集合903为图1所示的QPI域2中的CPU集合。

应注意，尽管图9所示的硬件仅仅示出了存储器901、接收器902和处理器集合903，但是在具体实现过程中，本领域的技术人员应当明白，该终端还包含实现正常运行所必须的其他器件。同时，根据具体需要，本领域的技术人员应当明白，还可包含实现其他功能的硬件器件。

具体的，图9所示的装置90用于实现图6实施例所示的装置时，该装置90中的处理器集合903，用于与存储器901和接收器902耦合，用于控制程序指令的执行，具体用于从Flash芯片中获取热添加代码；通过运行热添加代码执行QPI初始化，得到QPI初始化数据，并将QPI初始化数据提供给存储器901，其中QPI初始化包括建立待添加节点中的各个处理器的互联配置。

存储器901，用于将QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，SMMMonarch为已用节点中的逻辑处理器。其中，在本装置90中的存储器901具有让装置90与SMMMonarch共享数据的功能。

接收器902，用于接收SMMMonarch发送的内存初始化命令，并将内存初始化命令提供给处理器集合903。

处理器集合903，还用于根据内存初始化命令执行内存初始化，得到内存初始化数据，并将内存初始化数据提供给存储器901，内存初始化包括对进行待添加节点内各个内存的上电自检和内存配置。

存储器901，还用于将内存初始化数据提供给SMMMonarch。

需要说明的是，处理器集合903包括至少一个PBSP9021、一个SBSP9022。其中PBSP9021用于执行内存初始化，SBSP9022用于执行QPI初始化。SBSP9022为所在装置90中的任意一个PBSP9021进化而成的逻辑处理器。

进一步的，在SBSP9022执行QPI初始化之前，PBSP9021，还用于通过运行热添加代码进行处理器初始化，处理器初始化包括待添加节点内各个处理器的上电自检和初始化配置。

进一步的，处理器集合903获取热添加代码具体包括：

每个PBSP9021从所在处理器对应的Flash芯片中获取各自的热添加代码；或者，

每个PBSP9021从与处理器连接设备连接的Flash芯片中获取该XNC对应的热添加代码，处理器连接设备为将多处理器系统中的已用节点和待添加节点进行互连的设备。

进一步的，在SBPS9022执行QPI初始化之后，SBSP9022退化成之前进化的PBSP。然后在接收器902接收到内存初始化命令之后，依次提供给多个PBSP9021，以便于每个PBSP9021执行各自的内存初始化；在得到各自的内存初始化数据之后，存储在存储器901中。

可选的，存储器901、接收器902、处理器集合903还可以通过总线通信连接，总线可包括一通路，在装置各个部件(例如存储器901、收发器902和处理器集合903)之间传送信息。

本发明可以通过待添加节点对其内包括的处理器并行执行处理器热添加操作，或对其内包括的处理器并行执行处理器热添加操作以及待添加节点内包括的内存并行执行内存热添加操作，从而提高了操作系统处理性能。

如图10所示，图10为节点的处理装置100的硬件结构示意图。该装置应用于SMMMonarch，SMMMonarch为已用节点中的逻辑处理器，已用节点处于多处理器系统中，其中，还装置100可包括存储器1001、收发器1002和处理器1003。

其中在装置中对于存储器1001、收发器1002和处理器1003的共同功能的概述可参考图9中的UE包括的存储器1001、收发器1002和处理器1003的说明，在此不再一一赘述。

应注意，尽管图10所示的硬件仅仅示出了存储器1001、收发器1002和处理器1003，但是在具体实现过程中，本领域的技术人员应当明白，该终端还包含实现正常运行所必须的其他器件。同时，根据具体需要，本领域的技术人员应当明白，还可包含实现其他功能的硬件器件。

具体的，图10所示的UE用于实现图7-图8实施例所示的装置时，该装置中的收发器1002，用于接收系统管理中断SMI指示，SMI指示用于指示向多处理器系统中热添加待添加节点，待添加节点内包括通过QPI链路互联的处理器。

处理器1003，用于与存储器901和接收器902耦合，用于控制程序指令的执行，具体用于获取待添加节点提供的QPI初始化数据，QPI初始化数据为待添加节点通过QPI初始化得到的数据，QPI初始化包括建立待添加节点中的各个处理器间的互联配置。

收发器1002，用于向待添加节点发送内存初始化命令，内存初始化包括对待添加节点内各个内存的上电自检和内存配置。

处理器1003，还用于获取待添加节点提供的内存初始化数据。

进一步的，处理器1003，还用于检测待添加节点是否完成QPI初始化；在检测到待添加节点完成QPI初始化之后，获取待添加节点的SBSP提供的QPI初始化数据，其中，待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，SBSP为任意一个PBSP进化得到的逻辑处理器。

进一步的，处理器1003，还用于检测待添加节点是否完成内存初始化；在检测到待添加节点完成内存初始化之后，获取每个PBSP提供的内存初始化数据。

本发明可以实现提高了操作系统处理性能的目的。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

本发明实施例中，当没有新增内存时，对系统而言内存初始化的操作仍然会被执行，也就是说会获得初始化数据；但对内存而言，不会有内存真的执行初始化，也就是说初始化数据为0。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (13)

1.一种节点的处理方法，其特征在于，所述方法应用于待添加节点，所述待添加节点为向多处理器系统进行热添加操作的节点，所述多处理器系统包括已用节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器，所述已用节点内包括通过QPI链路互联的已运行的处理器，所述方法包括：

上电之后的待添加节点从Flash芯片中获取热添加代码；

所述待添加节点通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，其中所述QPI初始化包括建立所述待添加节点中的各个处理器的互联配置；

所述待添加节点将所述QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为所述已用节点中的逻辑处理器；

所述待添加节点接收到所述SMMMonarch发送的内存初始化命令后执行内存初始化，得到内存初始化数据，所述内存初始化包括对所述待添加节点内各个内存的上电自检和内存配置；

所述待添加节点将所述内存初始化数据提供给所述SMMMonarch。

2.根据权利要求1所述的节点的处理方法，其特征在于，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

在所述待添加节点从Flash芯片中获取热添加代码之后，所述方法还包括：

所述PBSP通过运行所述热添加代码进行处理器初始化，所述处理器初始化包括对所述待添加节点内各个处理器的上电自检和初始化配置；

所述待添加节点通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，包括：

所述SBSP通过运行所述热添加代码执行所述QPI初始化，得到所述QPI初始化数据。

3.根据权利要求2所述的节点的处理方法，其特征在于，所述待添加节点从Flash芯片中获取热添加代码，包括：

所述PBSP从所述待添加节点对应的Flash芯片中获取各自的热添加代码；或者，

所述PBSP从与处理器连接设备连接的Flash芯片中获取所述处理器连接设备对应的热添加代码，所述处理器连接设备为将所述多处理器系统中的所述已用节点和所述待添加节点进行互连的设备。

4.根据权利要求2或3所述的节点的处理方法，其特征在于，在所述待添加节点将进行所述QPI初始化的QPI初始化数据发送给系统管理模式主逻辑处理器SMMMonarch之后，所述方法还包括：

所述SBSP退化成进化之前的PBSP；

所述待添加节点接收所述SMMMonarch发送的内存初始化命令；根据所述内存初始化命令执行内存初始化，得到内存初始化数据，包括：

所述待添加节点中的每个PBSP分别接收所述SMMMonarch发送的所述内存初始化命令；

所述待添加节点中的每个PBSP根据所述内存初始化命令执行各自的内存初始化，得到各自的内存初始化数据。

5.一种节点的处理方法，其特征在于，所述方法应用于系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为已用节点中的逻辑处理器，所述已用节点处于多处理器系统中，所述方法包括：

所述SMMMonarch接收系统管理中断SMI指示，所述SMI指示用于指示向所述多处理器系统中热添加待添加节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器；

所述SMMMonarch获取所述待添加节点提供的QPI初始化数据，所述QPI初始化数据为所述待添加节点通过QPI初始化得到的数据，所述QPI初始化包括建立所述待添加节点中的各个处理器间的互联配置；

所述SMMMonarch向所述待添加节点发送内存初始化命令，所述内存初始化命令用于指示所述待添加节点执行内存初始化，所述内存初始化包括对所述待添加节点内各个内存的上电自检和内存配置；

所述SMMMonarch获取所述待添加节点提供的内存初始化数据。

6.根据权利要求5所述的节点的处理方法，其特征在于，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

所述SMMMonarch获取所述待添加节点提供的QPI初始化数据，包括：

所述SMMMonarch检测到所述待添加节点完成所述QPI初始化之后，获取所述SBSP提供的QPI初始化数据。

7.根据权利要求6所述的节点的处理方法，其特征在于，所述SMMMonarch获取所述待添加节点提供的内存初始化数据，包括：

所述SMMMonarch检测到所述待添加节点完成所述内存初始化之后，获取所述待添加节点的每个PBSP提供的内存初始化数据。

8.一种节点的处理装置，其特征在于，所述装置应用于待添加节点，所述待添加节点为向多处理器系统进行热添加操作的节点，所述多处理器系统包括已用节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器，所述已用节点内包括通过QPI链路互联的已运行的处理器，所述装置包括：

获取模块，用于从Flash芯片中获取热添加代码，并将所述热添加代码提供给第一初始化模块；

所述第一初始化模块，用于通过运行所述热添加代码执行QPI初始化，得到QPI初始化数据，并将所述QPI初始化数据提供给共享模块，其中所述QPI初始化包括建立所述待添加节点中的各个处理器的互联配置；

所述共享模块，用于将所述QPI初始化数据提供给系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为所述已用节点中的逻辑处理器；

接收模块，用于接收所述SMMMonarch发送的内存初始化命令，并将所述内存初始化命令提供给第二初始化模块；

所述第二初始化模块，用于通过所述内存初始化命令执行内存初始化，得到内存初始化数据，并将所述内存初始化数据提供给所述共享模块，所述内存初始化包括对所述待添加节点内各个内存模块的上电自检和内存配置；

所述共享模块，还用于将所述内存初始化数据提供给所述SMMMonarch。

9.根据权利要求8所述的节点的处理装置，其特征在于，

所述第二初始化模块，还用于通过所述热添加代码进行处理器初始化，所述处理器初始化包括对所述待添加节点内各个处理器的上电自检和初始化配置。

10.根据权利要求9所述的节点的处理装置，其特征在于，

所述获取模块，具体用于从所在装置对应的Flash芯片中获取所述热添加代码；或者，用于从与处理器连接设备连接的Flash芯片中获取所述热添加代码，所述处理器连接设备为将所述多处理器系统中的所述已用节点和所述待添加节点进行互连的设备。

11.一种节点的处理装置，其特征在于，所述装置应用于系统管理模式主逻辑处理器SMMMonarch，所述SMMMonarch为已用节点中的逻辑处理器，所述已用节点处于多处理器系统中，所述装置包括：

接收模块，用于接收系统管理中断SMI指示，所述SMI指示用于指示向所述多处理器系统中热添加待添加节点，所述待添加节点内包括通过快速通道互联QPI链路互联的处理器；

获取模块，用于获取所述待添加节点提供的QPI初始化数据，所述QPI初始化数据为所述待添加节点通过QPI初始化得到的数据，所述QPI初始化包括建立所述待添加节点中的各个处理器间的互联配置；

发送模块，用于向所述待添加节点发送内存初始化命令，所述内存初始化命令用于指示所述待添加节点执行内存初始化，所述内存初始化包括对所述待添加节点内各个内存模块的上电自检和内存配置；

所述获取模块，还用于获取所述待添加节点提供的内存初始化数据。

12.根据权利要求11所述的节点的处理装置，其特征在于，所述待添加节点包括系统启动处理器SBSP和至少一个包启动处理器PBSP，其中，所述SBSP为任意一个PBSP进化得到的逻辑处理器；

所述装置还包括：检测模块，

所述检测模块，用于检测所述待添加节点是否完成所述QPI初始化；

所述获取模块，还用于在所述检测模块检测到所述待添加节点完成所述QPI初始化之后，获取所述SBSP提供的QPI初始化数据。

13.根据权利要求12所述的节点的处理装置，其特征在于，

所述检测模块，还用于检测所述待添加节点是否完成所述内存初始化；

所述获取模块，还用于在所述检测模块检测到所述待添加节点完成所述内存初始化之后，获取所述待添加节点的每个PBSP提供的内存初始化数据。