CN115185456A - 集群缩容风险提示方法、装置、设备及介质 - Google Patents
集群缩容风险提示方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN115185456A CN115185456A CN202210753321.3A CN202210753321A CN115185456A CN 115185456 A CN115185456 A CN 115185456A CN 202210753321 A CN202210753321 A CN 202210753321A CN 115185456 A CN115185456 A CN 115185456A
- Authority
- CN
- China
- Prior art keywords
- capacity
- data volume
- capacity reduction
- cluster
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 61
- 230000009467 reduction Effects 0.000 claims abstract description 206
- 238000004590 computer program Methods 0.000 claims description 22
- 238000004364 calculation method Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 9
- 238000013507 mapping Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 238000012423 maintenance Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011038 discontinuous diafiltration by volume reduction Methods 0.000 description 1
- 210000001699 lower leg Anatomy 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0634—Configuration or reconfiguration of storage systems by changing the state or mode of one or more devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0653—Monitoring storage devices or systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种集群缩容风险提示方法、装置、设备及介质，涉及计算机技术领域，该方法包括：获取当前存储集群中存储池的总数据量以及与所述存储池对应的预设数据分布规则；基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储池中对象存储资源的预计数据量；判断所述预计数据量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信息。预先在集群缩容之前，计算出缩容后的存储池中对象存储资源的预计数据量，若预计数据量小于对象存储资源的总容量，则显示与对象存储资源对应的预设缩容风险提示信息，避免进行集群缩容操作，因此能够降低因集群缩容操作有风险而所产生的成本。
Description
技术领域
本发明涉及计算机技术领域，特别涉及集群缩容风险提示方法、装置、 设备及介质。
背景技术
分区容错性作为分布式的三要素之首存在，在分布式存储集群中，存储 介质的动态调整作为常规动作来处理，如果存储介质从集群中移除即集群缩 容，存储集群的剩余容量变小，但是如果剩余容量不满足所需容量，因此会 发生缩容风险，可能需要进行相关扩容操作，便捷程度大大降低，因此维护 成本提高。
综上可见，如何降低因集群缩容操作有风险而所产生的成本是本领域有 待解决的问题。
发明内容
有鉴于此，本发明的目的在于提供一种集群缩容风险提示方法、装置、 设备及介质，能够降低因集群缩容操作有风险而所产生的成本。其具体方案 如下：
第一方面，本申请公开了一种集群缩容风险提示方法，包括：
获取当前存储集群中存储池的总数据量以及与所述存储池对应的预设数 据分布规则；
基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储 池中对象存储资源的预计数据量；
判断所述预计数据量是否小于所述对象存储资源的总容量，若小于则显 示与所述对象存储资源对应的预设缩容风险提示信息。
可选的，所述基于所述总数据量和所述预设数据分布规则，计算出缩容 后的所述存储池中对象存储资源的预计数据量，包括：
基于所述预设数据分布规则计算出缩容后的所述存储池中对象存储资源 的逻辑存储单元数量；
基于所述总数据量和所述逻辑存储单元数量计算出缩容后的所述对象存 储资源的预计数据量。
可选的，所述基于所述预设数据分布规则计算出缩容后的所述存储池中 对象存储资源的逻辑存储单元数量，包括：
基于crush规则计算出缩容后的所述存储池中对象存储资源的逻辑存储 单元数量。
可选的，所述基于所述总数据量和所述逻辑存储单元数量计算出缩容后 的所述对象存储资源的预计数据量，包括：
基于所述总数据量、所述逻辑存储单元数量和所述crush规则，并利用预 设缩容公式计算出缩容后的所述对象存储资源的预计数据量。
可选的，所述利用预设缩容公式计算出缩容后的所述对象存储资源的预 计数据量之前，还包括：
创建以所述总数据量、所述逻辑存储单元数量和所述crush规则为自变量 的所述预设缩容公式。
可选的，所述判断所述预计数据量是否小于所述对象存储资源的总容量， 包括：
依次判断预估容量表中的预计数据量是否小于所述对象存储资源的总容 量。
可选的，所述依次判断预估容量表中的预计数据量是否小于所述对象存 储资源的总容量之前，还包括：
获取所述对象存储资源的总容量，并基于所述预计数据量生成预估容量 表。
第二方面，本申请公开了一种集群缩容风险提示装置，包括：
规则获取模块，用于获取当前存储集群中存储池的总数据量以及与所述 存储池对应的预设数据分布规则；
缩容预计算模块，用于基于所述总数据量和所述预设数据分布规则，计 算出缩容后的所述存储池中对象存储资源的预计数据量；
风险提示模块，用于判断所述预计数据量是否小于所述对象存储资源的 总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
第三方面，本申请公开了一种电子设备，包括：
存储器，用于保存计算机程序；
处理器，用于执行所述计算机程序，以实现前述公开的集群缩容风险提 示方法的步骤。
第四方面，本申请公开了一种计算机可读存储介质，用于存储计算机程 序；其中，所述计算机程序被处理器执行时实现前述公开的集群缩容风险提 示方法的步骤。
可见，本申请获取当前存储集群中存储池的总数据量以及与所述存储池 对应的预设数据分布规则；基于所述总数据量和所述预设数据分布规则，计 算出缩容后的所述存储池中对象存储资源的预计数据量；判断所述预计数据 量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源 对应的预设缩容风险提示信息。由此可见，本申请在进行集群缩容之前，基 于总数据量和预设数据分布规则，计算出缩容后的述存储池中对象存储资源 的预计数据量，如果预计数据量小于对象存储资源的总容量，即存在相应的 集群缩容风险，因此显示与对象存储资源对应的预设缩容风险提示信息，避 免后续进行相应的集群缩容操作，进而避免了后续因为集群缩容操作有风险， 需要进行相关集群扩容操作，提高了便捷程度，降低因集群缩容操作有风险 所引起的成本。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实 施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面 描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不 付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种集群缩容风险提示方法流程图；
图2为本申请公开的一种具体的集群缩容风险提示方法流程图；
图3为本申请公开的一种具体的集群缩容风险提示方法流程图；
图4为本申请公开的一种具体的集群缩容风险提示方法流程示意图；
图5为本申请公开的一种集群缩容风险提示装置结构示意图；
图6为本申请公开的一种电子设备结构图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行 清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而 不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做 出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
分区容错性作为分布式的三要素之首存在，在分布式存储集群中，存储 介质的动态调整作为常规动作来处理，如果存储介质从集群中移除即集群缩 容，存储集群的剩余容量变小，但是如果剩余容量不满足所需容量，因此会 发生缩容风险，可能需要进行相关扩容操作，便捷程度大大降低，因此维护 成本提高。
为此本申请相应的提供了一种集群缩容风险提示方案，能够降低因集群 缩容操作有风险而所产生的成本。
参见图1所示，本申请实施例公开了一种集群缩容风险提示装置，包括：
步骤S11：获取当前存储集群中存储池的总数据量以及与所述存储池对应 的预设数据分布规则。
本实施例中，可以理解的是，分布式存储可以进行集群缩容操作，集群 缩容操作例如为故障换盘、批量换盘、整节点缩容。但是当前的AS13000并 没有相关方法来预估相关的集群缩容操作是否建议进行，即无法提前预估是 否存在相对有的缩容有容量风险，那么每一次都是在进行集群缩容操作之后 才知晓存在缩容有容量，因此必须中止缩容或相关的集群扩容操作，所以非 常不便捷，维护难度大大增加。
本实施例中，获取当前存储集群中各个存储池的总数据量pool_total_byte、 与每一存储池的分别对应的预设数据分布规则，还可以获取每一存储池中对 象存储资源(Object Storage Device，即OSD)的总容量OSD_total_byte和对 象存储资源的已使用容量OSD_used_byte。
步骤S12：基于所述总数据量和所述预设数据分布规则，计算出缩容后的 所述存储池中对象存储资源的预计数据量。
本实施例中，在进行集群缩容操作之前，基于各个存储池的总数据量 pool_total_byte以及对应的预设数据分布规则，计算出缩容后的各个存储池中 对应的对象存储资源的预计数据量OSD_recovered_byte。需要注意的是，可 以预先创建预设缩容公式，例如预先创建的预设缩容公式中以总数据量 pool_total_byte和预设数据分布规则为自变量，因此将获取到的总数据量 pool_total_byte和预设数据分布规则输入至预先创建的预设缩容公式中，便可 以在进行相应的集群缩容操作之前，得到对象存储资源的预计数据量 OSD_recovered_byte。
步骤S13：判断所述预计数据量是否小于所述对象存储资源的总容量，若 小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
本实施例中，计算出对象存储资源的预计数据量OSD_recovered_byte之 后，因为对象存储资源的预计数据量OSD_recovered_byte与存储池的个数相 对应，即如果存储池为多个，那么预计数据量的个数也为多个，因此可以创 建预计数据量与对象存资源以及存储池之间的映射关系，以得到预计容量统 计表，并遍历判断预计容量统计表中每一个预计数据量与对象存储资源的总 容量之间的数值大小关系，如果预计数据量小于对象存储资源的总容量，则 说明如果进行与该对象存储资源相对应的集群缩容操作，那么缩容后的容量 即预计数据量，不满足当前实际所需的容量即对象存储资源的总容量，因此 会发生有容量风险，那么可以在预设界面中显示与对象存储资源对应的预设 缩容风险提示信息，例如预设缩容风险提示信息为“如果进行此集群缩容操 作，那么缩容后的容量小于当前实际所需的容量，建议停止此集群缩容操作”， 以便用户知晓此集群缩容操作存在有容量风险，进而可以选择停止此集群缩 容操作，进而避免存在有容量风险后需要进行相关扩容操作，能够有效避免 存储池容量超出总容量的风险，减少不必要的运维措施，以便提升分布式存储集群的稳定性与健康指数；可以理解的是，如果预计数据量不小于对象存 储资源的总容量，则说明如果进行与该对象存储资源相对应的集群缩容操作， 那么缩容后的容量即预计数据量，可以满足当前实际所需的容量即对象存储 资源的总容量，因此会不会发生有容量风险，那么可以无需提示用户，默认 此集群缩容操作可以继续进行。
可见，本申请获取当前存储集群中存储池的总数据量以及与所述存储池 对应的预设数据分布规则；基于所述总数据量和所述预设数据分布规则，计 算出缩容后的所述存储池中对象存储资源的预计数据量；判断所述预计数据 量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源 对应的预设缩容风险提示信息。由此可见，本申请在进行集群缩容之前，基 于总数据量和预设数据分布规则，计算出缩容后的述存储池中对象存储资源 的预计数据量，如果预计数据量小于对象存储资源的总容量，即存在相应的 集群缩容风险，因此显示与对象存储资源对应的预设缩容风险提示信息，避 免后续进行相应的集群缩容操作，进而避免了后续因为集群缩容操作有风险， 需要进行相关集群扩容操作，提高了便捷程度，降低因集群缩容操作有风险 所引起的成本。
参见图2所示，本申请实施例公开了一种具体的集群缩容风险提示装置， 包括：
步骤S21：获取当前存储集群中存储池的总数据量以及与所述存储池对应 的预设数据分布规则。
其中，关于步骤S21更加具体的过程参见前述公开的实施例所示，在此 不做具体赘述。
步骤S22：基于所述预设数据分布规则计算出缩容后的所述存储池中对象 存储资源的逻辑存储单元数量。
本实施例中，所述基于所述预设数据分布规则计算出缩容后的所述存储 池中对象存储资源的逻辑存储单元数量，具体包括：基于crush规则计算出缩 容后的所述存储池中对象存储资源的逻辑存储单元数量。基于预设数据分布 规则计算出缩容后的存储池中每一个对象存储资源的逻辑存储单元 (placement groups，即PG)数量num_pg_per_osd，其中预设数据分布规则可 以为crush规则。
步骤S23：基于所述总数据量和所述逻辑存储单元数量计算出缩容后的所 述对象存储资源的预计数据量。
本实施例中，所述基于所述总数据量和所述逻辑存储单元数量计算出缩 容后的所述对象存储资源的预计数据量，具体包括：基于所述总数据量、所 述逻辑存储单元数量和所述crush规则，并利用预设缩容公式计算出缩容后的 所述对象存储资源的预计数据量。基于总数据量pool_total_byte、逻辑存储单 元数量num_pg_per_osd和crush规则crush_ratio，并利用预设缩容公式计算出 缩容后的对象存储资源的预计数据量OSD_recovered_byte。
本实施例中，所述利用预设缩容公式计算出缩容后的所述对象存储资源 的预计数据量之前，还包括：创建以所述总数据量、所述逻辑存储单元数量 和所述crush规则为自变量的所述预设缩容公式。可以理解的是，可以预先创 建预设缩容公式，其中预设缩容公式可以为以总数据量、述逻辑存储单元数 量和crush规则为自变量，因此当获取到总数据量、述逻辑存储单元数量和 crush规则，就可以在集群缩容操作之前，就计算出各个存储池中每一个存储 介质即对象存储资源的预计数据量OSD_recovered_byte，方法简单便捷，其中预设缩容公式如下所示：
OSD_recovered_byte＝pool_total_byte/pool_new_pgs*num_pg_per_osd*crush_ratio；
式中，OSD_recovered_byte表示对象存储资源的预计数据量， pool_total_byte表示存储池的总数据量，pool_new_pgs表示存储池中新增逻辑 存储单元，num_pg_per_osd表示逻辑存储单元数量，crush_ratio表示crush规 则。
步骤S24：判断所述预计数据量是否小于所述对象存储资源的总容量，若 小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
本实施例中，在利用预设缩容公式得到各个存储池中每一个存储介质即 对象存储资源的预计数据量OSD_recovered_byte之后，需要判断各个存储池中 每一个存储介质即对象存储资源的预计数据量OSD_recovered_byte是否不小 于与对应的对象存储资源的总容量OSD_total_byte，如果不小于说明对应的集 群缩容操作可以执行，不存在缩容有容量风险的情况，进而也无需进行相关 预警，如果小于，则说明对应的集群缩容操作不可以执行，存在缩容有容量 风险的情况，因此可以在预设界面显示对应的预设缩容风险提示信息，以便 用户基于具体情况进行处理。可以理解的是，在进行判断预计数据量是否小 于对象存储资源的总容量之前，可以建立预计数据量、对象存储资源以及存 储池的映射关系，还可以建立预计数据量、对象存储资源、存储池以及判断 结果的映射关系，其中，可以利用存储池的编号和对象存储资源的编号的形 式创建映射关系，例如第三个存储池的第七个对象存储资源的预计数据量大 于对象存储资源的总容量，也可以利用存储池的标识信息和对象存储资源的 标识信息的形式创建映射关系，例如存储池A的对象存储资源G的预计数据量 大于对象存储资源的总容量。
由此可见，本申请在在分布式存储集群缩容之前，利用分布式算法，对 当前集群内所有存储池的所有硬件介质进行预估，计算出缩容后数据的分配 情况，是否超过存储介质的总容量，能够有效避免存储池容量超出总容量的 风险，减少不必要的运维措施，进而提升分布式存储集群的稳定性与健康指 数，进一步提升分布式存储的竞争力。
参见图3所示，本申请实施例公开了一种具体的集群缩容风险提示装置， 包括：
步骤S31：获取当前存储集群中存储池的总数据量以及与所述存储池对应 的预设数据分布规则。
其中，关于步骤S31更加具体的过程参见前述公开的实施例所示，在此 不做具体赘述。
步骤S32：基于所述总数据量和所述预设数据分布规则，计算出缩容后的 所述存储池中对象存储资源的预计数据量。
本实施例中，基于所述总数据量和所述预设数据分布规则，计算出缩容 后的所述存储池中对象存储资源的预计数据量之前，可以在AS13000管理界 面获取待缩容设备，并确定出是存储池缩容还是节点缩容，如果是存储池缩 容，那么在计算对象存储资源的预计数据量时，计算过程应与存储池缩容相 对应；如果是节点缩容，那么在计算对象存储资源的预计数据量时，计算过 程应与节点缩容相对应。
步骤S33：依次判断预估容量表中的预计数据量是否小于所述对象存储资 源的总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信 息。
本实施例中，所述依次判断预估容量表中的预计数据量是否小于所述对 象存储资源的总容量之前，还包括：获取所述对象存储资源的总容量，并基 于所述预计数据量生成预估容量表。因为可能进行集群缩容操作的存储池为 多个，因此可以建立预估容量表，其中预估容量表中可以包含预计数据量与 对象存储资源以及存储池的映射关系，以便循环遍历获取各个存储池中每一 个对象存储资源的预计数据量与总容量的数值大小关系，基于数值大小关系 确定出存在缩容有容量风险的对象存储资源，并进行相应的集群缩容风险提 示，以便阻止该集群缩容操作。
由此可见，本申请通过在缩容前生成预估容量表，遍历获取预估容量表 中预计数据量与对象存储资源的总容量的数值大小关系，以实现对缩容后的 各个存储介质即对象存储资源数据量的估计，进而实现缩容管控。
下面以图4所示的一种具体的集群缩容风险提示方法流程示意图为例， 对本申请所述的集群缩容风险提示方法进行说明。获取获取当前存储集群中 存储池的总数据量pool_total_byte以及与所述存储池对应的预设数据分布规 则，还可以获取每一存储池中对象存储资源的总容量OSD_total_byte和对象 存储资源的已使用容量OSD_used_byte。可以假设将待缩容对象存储资源从集 群中删除，以便重新计算集群缩容后的对象存储资源的预计数据量，即 crushmap。基于所述预设数据分布规则计算出缩容后的所述存储池中对象存储 资源的逻辑存储单元数量，其中与所述存储池对应的预设数据分布规则可以 为crush规则，即可以基于crush规则计算出缩容后的所述存储池中对象存储 资源的逻辑存储单元数量，然后基于所述总数据量和所述逻辑存储单元数量 计算出缩容后的所述对象存储资源的预计数据量；基于所述总数据量、所述 逻辑存储单元数量和所述crush规则，并利用预设缩容公式计算出缩容后的所 述对象存储资源的预计数据量；可以预先创建以所述总数据量、所述逻辑存 储单元数量和所述crush规则为自变量的所述预设缩容公式。可以理解的是， 可以循环遍历计算出各个存储池中对象存储资源的预计数据量，从各个存储池中选取一个存储池作为当前存储池，并从当前存储池中选取一个对象存储 资源作为当前对象存储资源，并计算当前对象存储资源的预计数据量。获取 所述对象存储资源的总容量，并基于所述预计数据量生成预估容量表，并依 次判断预估容量表中的预计数据量是否小于所述对象存储资源的总容量。如 果预计数据量不小于所述对象存储资源的总容量，则可以进行判断下一对象 存储资源的预计数据量是否小于所述对象存储资源的总容量的步骤，如果小 于则说明当前对象存储资源存在缩容有容量风险，进行相应的提示，直至所 有的存储池中所有的对象存储资源都已确定完毕，流程结束。在分布式存储 进行缩容操作时，能够有效避免存储池容量超出总容量的风险，减少不必要 的运维措施。进而提升分布式存储集群的稳定性与健康指数。进一步提升分 布式存储的竞争力。
参见图5所示，本申请实施例公开了一种集群缩容风险提示装置，包括：
规则获取模块11，用于获取当前存储集群中存储池的总数据量以及与所 述存储池对应的预设数据分布规则；
缩容预计算模块12，用于基于所述总数据量和所述预设数据分布规则， 计算出缩容后的所述存储池中对象存储资源的预计数据量；
风险提示模块13，用于判断所述预计数据量是否小于所述对象存储资源 的总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
本实施例中，通过规则获取模块11，可以获取当前存储集群中各个存储 池的总数据量、与每一存储池的分别对应的预设数据分布规则，还可以获取 每一存储池中对象存储资源的总容量和对象存储资源的已使用容量。本实施 例中，通过缩容预计算模块12，可以基于所述预设数据分布规则计算出缩容 后的所述存储池中对象存储资源的逻辑存储单元数量，并基于所述总数据量 和所述逻辑存储单元数量计算出缩容后的所述对象存储资源的预计数据量； 通过缩容预计算模块12，可以基于crush规则计算出缩容后的所述存储池中 对象存储资源的逻辑存储单元数量；通过缩容预计算模块12，可以基于所述 总数据量、所述逻辑存储单元数量和所述crush规则，并利用预设缩容公式计 算出缩容后的所述对象存储资源的预计数据量。通过缩容预计算模块12，可 以在基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储 池中对象存储资源的预计数据量之前，可以在AS13000管理界面获取待缩容 设备，并确定出是存储池缩容还是节点缩容，如果是存储池缩容，那么在计 算对象存储资源的预计数据量时，计算过程应与存储池缩容相对应；如果是 节点缩容，那么在计算对象存储资源的预计数据量时，计算过程应与节点缩 容相对应。通过缩容预计算模块12，可以基于所述总数据量、所述逻辑存储 单元数量和所述crush规则，并利用预设缩容公式计算出缩容后的所述对象存 储资源的预计数据量。通过缩容预计算模块12，可以创建以所述总数据量、 所述逻辑存储单元数量和所述crush规则为自变量的所述预设缩容公式，因此 当获取到总数据量、述逻辑存储单元数量和crush规则，就可以在集群缩容操 作之前，就计算出各个存储池中每一个存储介质即对象存储资源的预计数据 量。本实施例中，通过集群缩容风险提示装置，还可以依次判断预估容量表 中的预计数据量是否小于所述对象存储资源的总容量；通过集群缩容风险提 示装置，还可以获取所述对象存储资源的总容量，并基于所述预计数据量生 成预估容量表。通过集群缩容风险提示装置，可以建立预估容量表，其中预 估容量表中可以包含预计数据量与对象存储资源以及存储池的映射关系，以 便循环遍历获取各个存储池中每一个对象存储资源的预计数据量与总容量的 数值大小关系，基于数值大小关系确定出存在缩容有容量风险的对象存储资源，并进行相应的集群缩容风险提示，以便阻止该集群缩容操作。
可见，本申请获取当前存储集群中存储池的总数据量以及与所述存储池 对应的预设数据分布规则；基于所述总数据量和所述预设数据分布规则，计 算出缩容后的所述存储池中对象存储资源的预计数据量；判断所述预计数据 量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源 对应的预设缩容风险提示信息。由此可见，本申请在进行集群缩容之前，基 于总数据量和预设数据分布规则，计算出缩容后的述存储池中对象存储资源 的预计数据量，如果预计数据量小于对象存储资源的总容量，即存在相应的 集群缩容风险，因此显示与对象存储资源对应的预设缩容风险提示信息，避 免后续进行相应的集群缩容操作，进而避免了后续因为集群缩容操作有风险， 需要进行相关集群扩容操作，提高了便捷程度，降低因集群缩容操作有风险 所引起的成本。
在一些具体实施例中，所述缩容预计算模块12，包括：
单元数量计算单元，用于基于所述预设数据分布规则计算出缩容后的所 述存储池中对象存储资源的逻辑存储单元数量。
数据量计算单元，用于基于所述总数据量和所述逻辑存储单元数量计算 出缩容后的所述对象存储资源的预计数据量。
在一些具体实施例中，所述单元数量计算单元，包括：
逻辑存储单元数量计算单元，用于基于crush规则计算出缩容后的所述存 储池中对象存储资源的逻辑存储单元数量。
在一些具体实施例中，所述数据量计算单元，包括：
预计数据量计算单元，用于基于所述总数据量、所述逻辑存储单元数量 和所述crush规则，并利用预设缩容公式计算出缩容后的所述对象存储资源的 预计数据量。
在一些具体实施例中，所述集群缩容风险提示装置，包括：
缩容公式创建单元，用于创建以所述总数据量、所述逻辑存储单元数量 和所述crush规则为自变量的所述预设缩容公式。
在一些具体实施例中，所述集群缩容风险提示装置，包括：
判断单元，用于依次判断预估容量表中的预计数据量是否小于所述对象 存储资源的总容量。
在一些具体实施例中，所述集群缩容风险提示装置，包括：
预估容量表生成单元，用于获取所述对象存储资源的总容量，并基于所 述预计数据量生成预估容量表。
进一步的，本申请实施例还提供了一种电子设备。图6是根据一示例性实 施例示出的电子设备20结构图，图中的内容不能认为是对本申请的使用范围 的任何限制。
图6为本申请实施例提供的一种电子设备20的结构示意图。具体可以包 括：至少一个处理器21、至少一个存储器22、电源23、通信接口24、输入输 出接口25和通信总线26。其中，所述存储器22用于存储计算机程序，所述计 算机程序由所述处理器21加载并执行，以实现以下步骤；
获取当前存储集群中存储池的总数据量以及与所述存储池对应的预设数 据分布规则；
基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储 池中对象存储资源的预计数据量；
判断所述预计数据量是否小于所述对象存储资源的总容量，若小于则显 示与所述对象存储资源对应的预设缩容风险提示信息。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，具体可以实现以下步骤：
基于所述预设数据分布规则计算出缩容后的所述存储池中对象存储资源 的逻辑存储单元数量；
基于所述总数据量和所述逻辑存储单元数量计算出缩容后的所述对象存 储资源的预计数据量。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，具体可以实现以下步骤：
基于crush规则计算出缩容后的所述存储池中对象存储资源的逻辑存储 单元数量。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，具体可以实现以下步骤：
基于所述总数据量、所述逻辑存储单元数量和所述crush规则，并利用预 设缩容公式计算出缩容后的所述对象存储资源的预计数据量。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，具体可以实现以下步骤：
创建以所述总数据量、所述逻辑存储单元数量和所述crush规则为自变量 的所述预设缩容公式。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，具体可以实现以下步骤：
依次判断预估容量表中的预计数据量是否小于所述对象存储资源的总容 量。
在一些具体实施方式中，所述处理器通过执行所述存储器中保存的计算 机程序，还可以进一步包括以下步骤：
获取所述对象存储资源的总容量，并基于所述预计数据量生成预估容量 表。
本实施例中，电源23用于为电子设备上的各硬件设备提供工作电压；通 信接口24能够为电子设备创建与外界设备之间的数据传输通道，其所遵循的 通信协议是能够适用于本申请技术方案的任意通信协议，在此不对其进行具 体限定；输入输出接口25，用于获取外界输入数据或向外界输出数据，其具 体的接口类型可以根据具体应用需要进行选取，在此不进行具体限定。
其中，处理器21可以包括一个或多个处理核心，比如4核心处理器、8核 心处理器等。处理器21可以采用DSP(Digital Signal Processing，数字信号处理)、 FPGA(Field－Programmable Gate Array，现场可编程门阵列)、 PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实 现。处理器21也可以包括主处理器和协处理器，主处理器是用于对在唤醒状 态下的数据进行处理的处理器，也称CPU(CentralProcessing Unit，中央处理 器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一 些实施例中，处理器21可以在集成有GPU(Graphics Processing Unit，图像处理 器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中， 处理器21还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器 用于处理有关机器学习的计算操作。
另外，存储器22作为资源存储的载体，可以是只读存储器、随机存储器、 磁盘或者光盘等，其上所存储的资源包括操作系统221、计算机程序222及数 据223等，存储方式可以是短暂存储或者永久存储。
其中，操作系统221用于管理与控制电子设备上的各硬件设备以及计算机 程序222，以实现处理器21对存储器22中海量数据223的运算与处理，其可以 是Windows、Unix、Linux等。计算机程序222除了包括能够用于完成前述任一 实施例公开的由电子设备执行的集群缩容风险提示方法的计算机程序之外， 还可以进一步包括能够用于完成其他特定工作的计算机程序。数据223除了可 以包括电子设备接收到的由外部设备传输进来的数据，也可以包括由自身输 入输出接口25采集到的数据等。
进一步的，本申请实施例还公开了一种计算机可读存储介质，用于存储 计算机程序；其中，所述计算机程序被处理器执行时实现前述公开的计算机 唤醒及接口加密方法。
关于该方法的具体步骤可以参考前述实施例中公开的相应内容，在此不 再进行赘述。
本申请书中各个实施例采用递进的方式描述，每个实施例重点说明的都 是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可 对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述 的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示 例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现， 为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性 地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行， 取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定 的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本 申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、 处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存 储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编 程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任 意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语 仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求 或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术 语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而 使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且 还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或 者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……” 限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存 在另外的相同要素。
以上对本发明所提供的一种集群缩容风险提示方法、装置、设备及介质 进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了 阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同 时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应 用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的 限制。
Claims (10)
1.一种集群缩容风险提示方法，其特征在于，包括：
获取当前存储集群中存储池的总数据量以及与所述存储池对应的预设数据分布规则；
基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储池中对象存储资源的预计数据量；
判断所述预计数据量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
2.根据权利要求1所述的集群缩容风险提示方法，其特征在于，所述基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储池中对象存储资源的预计数据量，包括：
基于所述预设数据分布规则计算出缩容后的所述存储池中对象存储资源的逻辑存储单元数量；
基于所述总数据量和所述逻辑存储单元数量计算出缩容后的所述对象存储资源的预计数据量。
3.根据权利要求2所述的集群缩容风险提示方法，其特征在于，所述基于所述预设数据分布规则计算出缩容后的所述存储池中对象存储资源的逻辑存储单元数量，包括：
基于crush规则计算出缩容后的所述存储池中对象存储资源的逻辑存储单元数量。
4.根据权利要求3所述的集群缩容风险提示方法，其特征在于，所述基于所述总数据量和所述逻辑存储单元数量计算出缩容后的所述对象存储资源的预计数据量，包括：
基于所述总数据量、所述逻辑存储单元数量和所述crush规则，并利用预设缩容公式计算出缩容后的所述对象存储资源的预计数据量。
5.根据权利要求4所述的集群缩容风险提示方法，其特征在于，所述利用预设缩容公式计算出缩容后的所述对象存储资源的预计数据量之前，还包括：
创建以所述总数据量、所述逻辑存储单元数量和所述crush规则为自变量的所述预设缩容公式。
6.根据权利要求1至5任一项所述的集群缩容风险提示方法，其特征在于，所述判断所述预计数据量是否小于所述对象存储资源的总容量，包括：
依次判断预估容量表中的预计数据量是否小于所述对象存储资源的总容量。
7.根据权利要求6所述的集群缩容风险提示方法，其特征在于，所述依次判断预估容量表中的预计数据量是否小于所述对象存储资源的总容量之前，还包括：
获取所述对象存储资源的总容量，并基于所述预计数据量生成预估容量表。
8.一种集群缩容风险提示装置，其特征在于，包括：
规则获取模块，用于获取当前存储集群中存储池的总数据量以及与所述存储池对应的预设数据分布规则；
缩容预计算模块，用于基于所述总数据量和所述预设数据分布规则，计算出缩容后的所述存储池中对象存储资源的预计数据量；
风险提示模块，用于判断所述预计数据量是否小于所述对象存储资源的总容量，若小于则显示与所述对象存储资源对应的预设缩容风险提示信息。
9.一种电子设备，其特征在于，包括：
存储器，用于保存计算机程序；
处理器，用于执行所述计算机程序，以实现如权利要求1至7任一项所述的集群缩容风险提示方法的步骤。
10.一种计算机可读存储介质，其特征在于，用于存储计算机程序；其中，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的集群缩容风险提示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210753321.3A CN115185456A (zh) | 2022-06-29 | 2022-06-29 | 集群缩容风险提示方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210753321.3A CN115185456A (zh) | 2022-06-29 | 2022-06-29 | 集群缩容风险提示方法、装置、设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115185456A true CN115185456A (zh) | 2022-10-14 |
Family
ID=83514769
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210753321.3A Pending CN115185456A (zh) | 2022-06-29 | 2022-06-29 | 集群缩容风险提示方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115185456A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116450577A (zh) * | 2023-06-14 | 2023-07-18 | 苏州浪潮智能科技有限公司 | 一种分布式文件系统缩容方法、系统、设备及存储介质 |
-
2022
- 2022-06-29 CN CN202210753321.3A patent/CN115185456A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116450577A (zh) * | 2023-06-14 | 2023-07-18 | 苏州浪潮智能科技有限公司 | 一种分布式文件系统缩容方法、系统、设备及存储介质 |
| CN116450577B (zh) * | 2023-06-14 | 2024-01-23 | 苏州浪潮智能科技有限公司 | 一种分布式文件系统缩容方法、系统、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107276827B (zh) | 一种分布式存储系统中Qos的实现方法及装置 | |
| CN102541657B (zh) | 用于对硬件加速器进行运行时功能分配的方法和设备 | |
| CN108681565B (zh) | 区块链数据并行处理方法、装置、设备和存储介质 | |
| CN109377542B (zh) | 三维模型渲染方法、装置及电子设备 | |
| US11489735B2 (en) | Dynamic network allocation apparatus, dynamic network allocation method and non-transitory computer-readable medium | |
| CN107315729B (zh) | 用于图表的数据处理方法、介质、装置和计算设备 | |
| CN111399941A (zh) | 一种bmc功能的批量配置方法、装置及设备 | |
| JP7270691B2 (ja) | データをラベリングするための方法、装置、電子機器、記憶媒体およびコンピュータプログラム | |
| CN110515917B (zh) | 一种控制重构速度的方法、装置及介质 | |
| CN115185456A (zh) | 集群缩容风险提示方法、装置、设备及介质 | |
| CN111399977A (zh) | 一种虚拟机的迁移方法、装置、设备及介质 | |
| CN109327472B (zh) | 动态规划防火墙策略插入方法、系统、终端及存储介质 | |
| CN114417780A (zh) | 状态同步方法、装置、电子设备及存储介质 | |
| WO2021114676A1 (zh) | 一种硬盘预测模型的更新方法、装置、设备及介质 | |
| CN116170522B (zh) | 数据传输方法及装置、电子设备、存储介质 | |
| CN107977923B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN113285890B (zh) | 网关流量的分配方法、装置、电子设备及存储介质 | |
| CN115222338A (zh) | 一种物料采购系统，一种采购清单生成方法及组件 | |
| TWI573018B (zh) | Information processing device and information processing method | |
| CN113064620A (zh) | 一种处理系统数据的方法和装置 | |
| CN114490432A (zh) | 内存处理方法、装置、电子设备和计算机可读存储介质 | |
| CN114416326A (zh) | 大数据管控方法、装置、管控系统及可读存储介质 | |
| CN111953569A (zh) | 状态信息上报方法、装置、设备及介质 | |
| EP4216097A1 (en) | Method, system, equipment and medium for modifying the layering layer information of finite element model unit | |
| CN114580543B (zh) | 模型训练方法、交互日志解析方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |