CN111953569A

CN111953569A - 状态信息上报方法、装置、设备及介质

Info

Publication number: CN111953569A
Application number: CN202010879674.9A
Authority: CN
Inventors: 许银龙; 孟祥瑞
Original assignee: Inspur Electronic Information Industry Co Ltd
Current assignee: Inspur Electronic Information Industry Co Ltd
Priority date: 2020-08-27
Filing date: 2020-08-27
Publication date: 2020-11-17
Anticipated expiration: 2040-08-27
Also published as: CN111953569B

Abstract

本申请公开了一种分布式存储集群状态信息上报方法、装置、设备、介质，该方法包括：获取所述对象存储设备节点所属分布式存储集群中的设备信息；根据所述设备信息确定是否需调整当前状态信息的上报时间间隔；如果需调整当前状态信息的上报时间间隔，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔；按照所述目标上报时间间隔进行状态信息上报。这样对象存储设备节点能够根据集群中的设备信息以及待上报的逻辑单元进行状态信息的上报时间间隔的动态调整，使得监控节点既能够及时更新集群状态，又不会使得监控设备在一定时间之内需要处理的消息过多，导致监控节点异常等问题。

Description

状态信息上报方法、装置、设备及介质

技术领域

本申请涉及存储技术领域，特别涉及一种分布式存储集群状态信息上报方法、装置、设备、介质。

背景技术

随着云计算技术的兴起和普及，分布式共享存储系统越来越受到业界的关注。当前在分布式存储系统中，需要向集群的监控节点上报信息，以方便监控节点根据接收到的状态信息管理集群。现有技术中，分布式存储集群中状态信息的上报一般采用固定时间间隔的方式。而随着分布式存储集群的规模越来越大，不同的用户场景下采用固定的时间间隔上报对象存储设备(Object-based Storage Device，OSD)状态往往无法适应越来越复杂的用户场景，会导致某些场景下状态信息的上报时间间隔太小，监控节点处理的消息过多，从而导致监控节点出现异常等，而某些场景下状态信息的上报时间间隔太大，导致监控节点无法及时更新集群状态。

发明内容

有鉴于此，本申请的目的在于提供一种分布式存储集群状态信息上报方法、装置、设备、介质，使得对象存储设备节点能够根据集群中的设备信息以及待上报的逻辑单元进行状态信息的上报时间间隔的动态调整，从而使得监控节点既能够及时更新集群状态，又不会使得监控设备在一定时间之内需要处理的消息过多，导致监控节点异常等问题。其具体方案如下：

第一方面，本申请公开了一种分布式存储集群状态信息上报方法，应用于对象存储设备节点，包括：

获取所述对象存储设备节点所属分布式存储集群中的设备信息；

根据所述设备信息确定是否需调整当前状态信息的上报时间间隔；

如果需调整当前状态信息的上报时间间隔，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔；

按照所述目标上报时间间隔进行状态信息上报。

可选地，所述获取所述对象存储设备节点所述分布式存储集群中的设备信息，包括：

获取所述对象存储设备节点所属分布式存储集群中的节点数量信息和所述对象存储设备节点的磁盘数量信息。

可选地，所述根据所述设备信息确定是否需调整当前状态信息的上报时间间隔，包括：

当所述节点数量信息中的节点数量大于或等于预设节点数量阈值时，确定需调整当前状态信息的上报时间间隔；

或，当所述磁盘数量信息中的磁盘数量大于或等于预设磁盘数量阈值时，确定需调整当前状态信息的上报时间间隔。

可选地，所述根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔，包括：

确定所述对象存储设备节点上当前待上报的逻辑单元数占所述对象存储设备节点上总逻辑单元数的目标比例；

判断所述目标比例是否大于或等于第一预设比例；

如果所述目标比例大于或等于第一预设比例，则将第一预设上报时间间隔确定为所述目标上报时间间隔。

可选地，所述判断所述目标比例是否大于或等于第一预设比例之后，还包括：

如果所述目标比例小于所述第一预设比例，则判断所述目标比例是否大于或等于第二预设比例；

如果所述目标比例大于或等于所述第二预设比例，则将第二预设上报时间间隔确定为所述目标上报时间间隔。

可选地，所述判断所述目标比例是否大于或等于第二预设比例之后，还包括：

如果所述目标比例小于所述第二预设比例，则将第三预设上报时间间隔确定为所述目标上报时间间隔。

第二方面，本申请公开了一种布式存储集群状态信息上报装置，应用于对象存储设备节点，包括：

第一信息获取模块，用于获取所述对象存储设备节点所属分布式存储集群中的设备信息；

第二信息确定模块，用于根据所述设备信息确定是否需调整当前状态信息的上报时间间隔；

上报时间间隔确定模块，用于在需调整当前状态信息的上报时间间隔时，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔；

状态信息上报模块，用于按照所述目标上报时间间隔进行状态信息上报。

可选地，所述上报时间间隔确定模块，用于：

判断所述目标比例是否大于或等于第一预设比例；

第三方面，本申请公开了一种电子设备，包括：

存储器和处理器；

其中，所述存储器，用于存储计算机程序；

所述处理器，用于执行所述计算机程序，以实现前述公开的分布式存储集群状态信息上报方法。

第四方面，本申请公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述公开的分布式存储集群状态信息上报方法。

可见，本申请先获取所述对象存储设备节点所属分布式存储集群中的设备信息，然后根据所述设备信息确定是否需调整当前状态信息的上报时间间隔，如果需调整当前状态信息的上报时间间隔，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔，并按照所述目标上报时间间隔进行状态信息上报。由此可见，本申请中对象存储设备节点可以先获取集群的设备信息，确定出集群的规模，然后再根据获取到的设备信息确定是否调整当前状态信息的上报时间间隔，如果需要调整当前状态信息的上报时间间隔，则根据实际的待上报的逻辑单元数和预设上报时间间隔确定出目标上报时间间隔，并按照所述上报时间间隔进行状态信息上报，这样对象存储设备节点能够根据集群中的设备信息以及待上报的逻辑单元进行状态信息的上报时间间隔的动态调整，使得监控节点既能够及时更新集群状态，又不会使得监控设备在一定时间之内需要处理的消息过多，导致监控节点异常等问题。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请公开的一种分布式存储集群状态信息上报方法流程图；

图2为本申请公开的一种具体的分布式存储集群状态信息上报方法流程图；

图3为本申请公开的一种分布式存储集群状态信息上报装置结构示意图；

图4为本申请公开的一种电子设备结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

目前，分布式存储集群中状态信息的上报一般采用固定时间间隔的方式。而随着分布式存储集群的规模越来越大，不同的用户场景下采用固定的时间间隔上报对象存储设备状态往往无法适应越来越复杂的用户场景，会导致某些场景下状态信息的上报时间间隔太小，监控节点处理的消息过多，从而导致监控节点出现异常等，而某些场景下状态信息的上报时间间隔太大，导致监控节点无法及时更新集群状态。有鉴于此，本申请提出了一种分布式存储集群状态信息上报方法，使得对象存储设备节点能够根据集群中的设备信息以及待上报的逻辑单元进行状态信息的上报时间间隔的动态调整，从而使得监控节点既能够及时更新集群状态，又不会使得监控设备在一定时间之内需要处理的消息过多，导致监控节点异常等问题。

参见图1所示，本申请实施例公开了一种分布式存储集群状态信息上报方法，应用于对象存储设备节点，该方法包括：

步骤S11：获取所述对象存储设备节点所属分布式存储集群中的设备信息。

在实际的分布式存储集群中，各个对象存储设备节点需要向集群中的监控节点上报状态信息，以便所述监控节点可以根据各个对象存储设备节点上报的状态信息进行集群管理，相应的，各个对象存储设备节点也就需要有自身的状态信息上报时间间隔，所以需要确定各个对象存储设备节点对应的上报时间间隔。

可以先获取所述对象存储设备节点所属分布式存储集群的设备信息，其中，所述设备信息包括对象存储设备节点的节点数量以及磁盘数量。在分布式存储集群中可以包括多个对象存储设备节点，每个对象存储设备节点上又有多个磁盘。

也即，所述获取所述对象存储设备节点所属分布式存储集群中的设备信息，包括：获取所述对象存储设备节点所属分布式存储集群中的节点数量信息和所述对象存储设备节点的磁盘数量信息。也即，对于单个对象存储设备节点来说，获取到的磁盘数量信息可以为自身的磁盘数量信息。

步骤S12：根据所述设备信息确定是否需调整当前状态信息的上报时间间隔。

相应地，在确定出所述设备信息之后，便可以根据所述设备信息确定是否需调整当前状态信息的上报时间间隔。其中，所述设备信息可以表明所对象存储设备节点对应的分布式存储集群的规模，所以可以根据所述设备信息确定是否需要调整当前状态信息的上报时间间隔。

具体的，当所述节点数量信息中的节点数量大于或等于预设节点数量阈值，则确定需调整当前状态信息的上报时间间隔。也即，当所述节点数量信息中的节点数量大于或等于预设节点数量阈值时，表明所述分布式存储集群中规模已经较大了，所以需要调整当前状态信息的上报时间间隔。

或者，当所述磁盘数量信息中的磁盘数量大于或等于预设磁盘数量阈值时，确定需调整当前状态信息的上报时间间隔。也即，当所述磁盘数量信息中的磁盘数量大于或等于预设磁盘数量阈值时，则表明所述对象存储设备节点上有较多的磁盘，相应的，所述对象存储设备节点上需要进行状态信息上报的逻辑单元数量相比之下也会较多，所述需要调整当前状态信息的上报时间间隔。

步骤S13：如果需调整当前状态信息的上报时间间隔，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔。

在具体的实施过程中，如果需调整当前状态信息的上报时间间隔，则可以根据所述对象存储节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔。

在实际应用中，所述状态信息的上报过程为逻辑单元将状态信息上报到对应的对象存储节点，然后对象存储节点再将自身对应的逻辑单元上报的状态信息上报到监控节点。

在第一种具体的实施过程中，可以根据所述对象存储节点上当前待上报的逻辑单元数所属的范围以及预设的范围和上报时间间隔对应关系确定所述目标上报时间。具体的，也即，可以预先设定逻辑单元数的范围，例如，0-50为一个范围，51-100为一个范围等，每个预先设定的逻辑单元数的范围都有对应的预设上报时间间隔，这样便可以先确定出当前待上报的逻辑单元数属于哪个范围，然后将这个范围对应的预设上报时间间隔确定为所述目标上报时间间隔。

在第二种具体的实施过程中，可以根据当前待上报的逻辑单元数占所述对象存储设备节点中的总逻辑单元数的比值以及预设的上报时间间隔确定所述目标上报时间间隔。

步骤S14：按照所述目标上报时间间隔进行状态信息上报。

可以理解的是，在确定出所述目标上报时间间隔之后，便可以按照所述目标上报时间间隔进行状态信息上报。也即，确定出所述目标上报时间间隔之后，便可以按照所述目标上报时间间隔将自身中的状态信息上报到集群的监控节点中，以便所述监控节点可以根据所述状态信息进行集群管理。

参见图2所示，本申请实施例公开了一种具体的方法，应用于对象存储设备节点，该方法包括：

步骤S21：获取所述对象存储设备节点所属分布式存储集群中的设备信息。

步骤S22：根据所述设备信息确定是否需调整当前状态信息的上报时间间隔。

步骤S21和步骤S22的具体实施过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。

步骤S23：如果需调整当前状态信息的上报时间间隔，则确定所述对象存储设备节点上当前待上报的逻辑单元数占所述对象存储设备节点上总逻辑单元数的目标比例。

当需要调整当前状态信息的上报时间间隔时，则可以先确定所述对象存储设备节点上当前待上报的逻辑单元数占所述对象存储设备节点上总逻辑单元数的目标比例。

具体的，就是先确定当前待上报的逻辑单元数占当前节点上的总逻辑单元数的目标比例。例如，当前待上报的逻辑单元数为50，所述对象存储设备节点上的总逻辑单元数为200，则当前待上报的逻辑单元数占所述对象存储设备节点上总逻辑单元数的目标比例为25％。

步骤S24：判断所述目标比例是否大于或等于第一预设比例。

在确定出所述目标比例之后，还需要判断所述目标比例是否大于或等于第一预设比例，以便确定所述对象存储节点中当前待上报的逻辑单元是否较多，以便确定相应的上报时间间隔。

步骤S25：如果所述目标比例大于或等于第一预设比例，则将第一预设上报时间间隔确定为所述目标上报时间间隔。

在判断所述目标比例是否大于或等于第一预设比例之后，如果所述目标比例大于或等于所述第一预设比例，则将第一预设时间间隔确定为所述目标上报时间间隔，其中，所述第一预设比例可以为80％，所述第一预设上报时间间隔可以根据所述磁盘数量信息中的磁盘数量和所述监控节点单位时间内平均处理的状态数确定。具体的，可以利用所述磁盘数量信息中的磁盘数量除以所述监控节点单位时间内平均处理的状态数，得到所述第一预设上报时间间隔，其中，监控节点平均每秒处理的状态数一般可以为100。

如果所述目标比例小于所述第一预设比例，则判断所述目标比例是否大于或等于第二预设比例；如果所述目标比例大于或等于所述第二预设比例，则将第二预设上报时间间隔确定为所述目标上报时间间隔。其中，所述第二预设比例可以为10％，所述第二预设上报时间间隔可以为所述第一预设上报时间间隔的一半。

当所述目标比例小于所述第二预设比例，则将第三预设上报时间间隔确定为所述目标上报时间间隔。也即，如果所述目标比例小于所述第二预设比例，则表明当前待上报的逻辑单元数较少，可以将第三预设上报时间间隔确定为所述目标上报时间间隔。例如，所述第三预设时间间隔可以为5秒。

在具体的实施过程中，可以将所述第三预设上报时间间隔确定为所述分布式存储集群的默认上报时间间隔。

通过以上方法，分布式存储集群中的各个对象存储节点可以根据对应的设备信息以及当前待上报的逻辑单元数动态调用上报时间间隔，可以使得上报时间间隔既适应集群要求，也适应对象存储设备节点自身的要求。

参见图3所示，本申请实施例公开了一种布式存储集群状态信息上报装置，应用于对象存储设备节点，包括：

第一信息获取模块11，用于获取所述对象存储设备节点所属分布式存储集群中的设备信息；

第二信息确定模块12，用于根据所述设备信息确定是否需调整当前状态信息的上报时间间隔；

上报时间间隔确定模块13，用于在需调整当前状态信息的上报时间间隔时，则根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔；

状态信息上报模块14，用于按照所述目标上报时间间隔进行状态信息上报。

进一步的，所述第一信息获取模块11，具体用于：

进一步的，所述第二信息确定模块12，具体用于：

具体的，所述上报时间间隔确定模块13，用于：

判断所述目标比例是否大于或等于第一预设比例；

进一步的，所述上报时间间隔确定模块13，具体用于：

参见图4所示，为本申请实施例提供的一种电子设备20的结构示意图，该电子设备20具体可以实现前述实施例中公开的分布式存储集群状态信息上报方法。

通常，本实施例中的电子设备20包括：处理器21和存储器22。

其中，处理器21可以包括一个或多个处理核心，比如四核心处理器、八核心处理器等。处理器21可以采用DSP(digital signal processing,数字信号处理)、FPGA(field-programmable gate array,现场可编程们阵列)、PLA(programmable logic array,可编程逻辑阵列)中的至少一种硬件来实现。处理器21也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(central processing unit,中应处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器21可以集成有GPU(graphics processing unit,图像处理器)，GPU用于负责显示屏所需要显示的图像的渲染和绘制。一些实施例中，处理器21可以包括AI(artificialintelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。

存储器22可以包括一个或多个计算机可读存储介质，计算机可读存储介质可以是非暂态的。存储器22还可以包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。本实施例中，存储器22至少用于存储以下计算机程序221，其中，该计算机程序被处理器21加载并执行之后，能够实现前述任一实施例中公开的布式存储集群状态信息上报方法步骤。另外，存储器22所存储的资源还可以包括操作系统222，存储方式可以是短暂存储也可以是永久存储。其中，操作系统222可以是Windows、Unix、Linux等。

在一些实施例中，电子设备20还可包括有显示屏23、输入输出接口24、通信接口25、传感器26、电源27以及通信总线28。

本技术领域人员可以理解，图4中示出的结构并不构成对电子设备20的限定，可以包括比图示更多或更少的组件。

进一步的，本申请实施例还公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述任一实施例中公开的布式存储集群状态信息上报方法。

其中，关于上述布式存储集群状态信息上报方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

最后，还需要说明的是，在本文中，诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或者操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得一系列包含其他要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上对本申请所提供的一种布式存储集群状态信息上报方法、装置、设备、介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims

1.一种分布式存储集群状态信息上报方法，其特征在于，应用于对象存储设备节点，包括：

按照所述目标上报时间间隔进行状态信息上报。

2.根据权利要求1所述的分布式存储集群状态信息上报方法，其特征在于，所述获取所述对象存储设备节点所属分布式存储集群中的设备信息，包括：

3.根据权利要求2所述的分布式存储集群状态信息上报方法，其特征在于，所述根据所述设备信息确定是否需调整当前状态信息的上报时间间隔，包括：

4.根据权利要求1所述的分布式存储集群状态信息上报方法，其特征在于，所述根据所述对象存储设备节点上当前待上报的逻辑单元数和预设上报时间间隔确定目标上报时间间隔，包括：

判断所述目标比例是否大于或等于第一预设比例；

5.根据权利要求4所述的分布式存储集群状态信息上报方法，其特征在于，所述判断所述目标比例是否大于或等于第一预设比例之后，还包括：

6.根据权利要求5所述的分布式存储集群状态信息上报方法，其特征在于，所述判断所述目标比例是否大于或等于第二预设比例之后，还包括：

7.一种布式存储集群状态信息上报装置，其特征在于，应用于对象存储设备节点，包括：

8.根据权利要求7所述的分布式存储集群状态信息上报装置，其特征在于，所述上报时间间隔确定模块，用于：

判断所述目标比例是否大于或等于第一预设比例；

9.一种电子设备，其特征在于，包括：

存储器和处理器；

其中，所述存储器，用于存储计算机程序；

所述处理器，用于执行所述计算机程序，以实现权利要求1至6任一项所述的分布式存储集群状态信息上报方法。

10.一种计算机可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的分布式存储集群状态信息上报方法。