CN111258501B - 一种逻辑卷删除的控制方法、装置及设备 - Google Patents

一种逻辑卷删除的控制方法、装置及设备 Download PDF

Info

Publication number
CN111258501B
CN111258501B CN202010027114.0A CN202010027114A CN111258501B CN 111258501 B CN111258501 B CN 111258501B CN 202010027114 A CN202010027114 A CN 202010027114A CN 111258501 B CN111258501 B CN 111258501B
Authority
CN
China
Prior art keywords
deletion
maximum
thread
deletion speed
logical volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010027114.0A
Other languages
English (en)
Other versions
CN111258501A (zh
Inventor
王旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202010027114.0A priority Critical patent/CN111258501B/zh
Publication of CN111258501A publication Critical patent/CN111258501A/zh
Application granted granted Critical
Publication of CN111258501B publication Critical patent/CN111258501B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G06F3/0665—Virtualisation aspects at area level, e.g. provisioning of virtual or logical volumes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及了一种逻辑卷删除的控制方法、装置及设备，其中该方法包括：根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数；根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略；响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷。本发明的实施例针对集群的不同情况和需求制定多个删除速度控制策略分别用于在不同情况下控制逻辑卷的整体删除速度，限制了逻辑卷删除操作对集群现有业务的影响，从而提供了更大的运维灵活性，进而提高了产品竞争力。

Description

一种逻辑卷删除的控制方法、装置及设备
技术领域
本发明涉及数据存储技术领域。本发明进一步涉及一种逻辑卷删除的控制方法、装置及设备。
背景技术
随着资讯的爆炸性增长和消费者对各种电子设备功能、性能方面的高要求，使用过程中产生了海量数据，也为数据的处理速度提出了更高的要求。基于此，成百甚至上千节点构建的大规模集群越来越受企业的青睐。随着集群承载业务量的增长，不可避免会出现集群容量不敷使用或者部分老旧数据清理的情况，如何在删除老旧数据的同时不影响现有业务使用，成为一个亟待解决的问题。
由于集群中的数据多数是以卷为单位存储，按卷来删除数据可以保证不对其余数据造成影响，但由于数据实际分布在各个节点的物理磁盘上，数据的删除操作不可避免会对物理磁盘造成一定压力，如果能够控制卷的删除速度，则不失为一种提高产品竞争力的有效途径。而目前业界尚未有控制逻辑卷删除速度的方法。
因此，需要提出一种实现对逻辑卷的删除速度进行有效控制的方法，通过控制删除速度，限制对集群现有业务的影响，从而提供更大的运维灵活性，进而提高产品竞争力。
发明内容
一方面，本发明基于上述目的提出了一种逻辑卷删除的控制方法，其中该方法包括以下步骤：
根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数；
根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略；
响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷。
根据本发明的逻辑卷删除的控制方法的实施例，其中根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：
在测试节点建立单进程并在单进程中配置单线程；
在一定时间内模拟对象删除操作并记录删除的对象总数；
基于删除对象总数和一定时间估算每秒最大删除个数。
根据本发明的逻辑卷删除的控制方法的实施例，其中根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：
识别逻辑卷的对象大小，并基于估算的每秒最大删除个数和逻辑卷的对象大小的乘积确定单线程最大删除速度。
根据本发明的逻辑卷删除的控制方法的实施例，其中基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略进一步包括：
基于单线程最大删除速度、最大线程数、最大进程数制定第一删除速度控制策略、第二删除速度控制策略和第三删除速度控制策略，其中：
第一删除速度控制策略配置为建立最大进程数的进程并分别在各个进程中配置最大线程数的线程，各个线程采用等于单线程最大删除速度的删除速度；
第二删除速度控制策略配置为建立单进程并分别在单进程中配置单线程，单线程采用小于等于单线程最大删除速度的删除速度；
第三删除速度控制策略配置为建立小于最大进程数的进程并分别在各个进程中配置小于最大线程数的线程，所建立的进程数和所建立的线程数不同时为一并且各个线程采用小于等于单线程最大删除速度的删除速度。
根据本发明的逻辑卷删除的控制方法的实施例，其中第二删除速度控制策略进一步配置为根据逻辑卷的对象大小相应调整每秒删除个数使得删除速度小于等于单线程最大删除速度。
根据本发明的逻辑卷删除的控制方法的实施例，其中第三删除速度控制策略进一步配置为使各个线程采用单线程最大删除速度，相应调整建立的进程的数量以及分别在各个进程中配置的线程的数量使得单线程最大删除速度、建立的进程的数量、配置的线程的数量的乘积大于单线程最大删除速度且小于等于删除速度阈值。
根据本发明的逻辑卷删除的控制方法的实施例，其中第三删除速度控制策略进一步配置为计算删除速度阈值与单线程最大删除速度的比值，根据比值确定单个进程中待配置的线程数，并基于比值与线程数的商确定待建立的进程数。
根据本发明的逻辑卷删除的控制方法的实施例，其中响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷进一步包括：
响应于控制标识为无效，按照第一删除速度控制策略删除逻辑卷；
响应于控制标识为有效且不包含删除速度阈值，按照第二删除速度控制策略删除逻辑卷；
响应于控制标识为有效且包含删除速度阈值，按照第三删除速度控制策略删除逻辑卷。
另一方面，本发明还提出了一种逻辑卷删除的控制装置，其中该装置包括：
极值参数配置模块，该极值参数配置模块配置为根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数；
删除速度估算模块，该删除速度估算模块配置为根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
控制策略生成模块，该控制策略生成模块配置为基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略；
控制策略执行模块，该控制策略执行模块配置为响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷。
此外，本发明进一步提出了一种逻辑卷删除的控制设备，其中该设备包括：
至少一个处理器；和
存储器，该存储器存储有处理器可运行的程序指令，该程序指令在被处理器运行时执行前述逻辑卷删除的控制方法的实施例任一项的步骤。
采用上述技术方案，本发明至少具有如下有益效果：根据集群的情况合理确定单线程最大删除速度、最大线程数、最大进程数，并基于上述确定的单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略分别用于针对不同情况和需求控制逻辑卷的整体删除速度，限制了逻辑卷删除操作对集群现有业务的影响，从而提供了更大的运维灵活性，进而提高了产品竞争力。
本发明提供了实施例的各方面，不应当用于限制本发明的保护范围。根据在此描述的技术可设想到其它实施方式，这对于本领域普通技术人员来说在研究以下附图和具体实施方式后将是显而易见的，并且这些实施方式意图被包含在本申请的范围内。
下面参考附图更详细地解释和描述了本发明的实施例，但它们不应理解为对于本发明的限制。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对现有技术和实施例描述中所需要使用的附图作简单地介绍，附图中的部件不一定按比例绘制，并且可以省略相关的元件，或者在一些情况下比例可能已经被放大，以便强调和清楚地示出本文描述的新颖特征。另外，如本领域中已知的，结构顺序可以被不同地布置。
图1示出了根据本发明的逻辑卷删除的控制方法的实施例的示意性框图；
图2示出了根据本发明的逻辑卷删除的控制装置的实施例的示意图。
具体实施方式
虽然本发明可以以各种形式实施，但是在附图中示出并且在下文中将描述一些示例性和非限制性实施例，但应该理解的是，本公开将被认为是本发明的示例并不意图将本发明限制于所说明的具体实施例。
在下文就本发明的实施例的说明中需要注意的是，其中提到的步骤的编号在没有特殊说明的情况下，仅用于便捷明确地指示该步骤，并不限定所述步骤的顺序。
为了实现对逻辑卷的删除速度进行有效控制，以限制对集群现有业务的影响，从而提供更大的运维灵活性，进而提高产品竞争力，本发明提出了一种逻辑卷删除的控制方法。图1示出了根据本发明的逻辑卷删除的控制方法的实施例的示意性框图。在如图1所示的实施例中，该控制方法至少包括：
S1：根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数；
S2：根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
S3：基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略；
S4：响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷。
具体地说，首先步骤S1根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数。其中，根据集群内的节点个数及各节点的业务状态确定最大进程数Mmax(Mmax≥1)，优选但不限于，在节点的业务压力相对较大的情况下和/或在节点的业务对进程需求较为苛刻的情况下和/或在为了严格保证/冗余节点中用于业务的进程数的情况下和/或其它类似要求的情况下，单节点仅允许建立一个用于删除的进程，因而选定最大进程数Mmax等于集群内的节点个数。此外，根据各节点的软硬件配置确定最大线程数Nmax(Nmax≥1)，其中优选但不限于，在节点的迎接配置较高(例如CPU核数较高)的情况下，单进程中允许配置多个线程，例如配置与CPU核数相应数量的线程。
随后，步骤S2根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度。由于集群中的数据多数是以逻辑卷为单位存储，按逻辑卷来删除数据可以保证不对其余数据造成影响。逻辑卷内数据均以对象形式存放于存储池中，通过逻辑卷的指纹信息可以过滤出其上所有对象ID(Identity或Identification)，每个对象ID唯一标识一个对象。此外，同一逻辑卷中即使数据实际分布在各个节点的物理磁盘上，但是对象大小L是统一的。基于此，根据集群的实际情况估算出的针对逻辑卷进行删除操作时的每秒最大删除个数Kmax，并利用估算出的每秒最大删除个数Kmax以及逻辑卷的统一的对象大小L可以确定单进程单线程上允许采用的单线程最大删除速度Vmax。
在上述步骤S1、S2的基础上，步骤S3基于S2得到的单线程最大删除速度Vmax、S1得到的最大线程数Nmax以及最大进程数Mmax制定多个删除速度控制策略分别用于针对不同情况和需求控制逻辑卷的整体删除速度。并且，当接收到对逻辑卷的删除指令时，步骤S4根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷，即通过逐一按照对象ID删除该逻辑卷中所有对象完成对整个逻辑卷的删除操作。
在本发明的逻辑卷删除的控制方法的一些实施例中，步骤S2根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：
S21：在测试节点建立单进程并在单进程中配置单线程；
S22：在一定时间内模拟对象删除操作并记录删除的对象总数；
S23：基于删除对象总数和一定时间估算每秒最大删除个数。
也就是说，估算每秒最大删除个数Kmax可以通过进一步包括步骤S21至S23的实施例来实现。优选但不限于，通过模拟删除对象的操作，进行一定时间的测试(例如一分钟或若干分钟)，统计测试期间删除的对象个数来估算每秒最大删除个数Kmax。具体地说，以某一节点(例如业务压力最均衡的节点或业务压力最小的节点)作为测试节点，步骤S21在测试节点建立单进程并在单进程中配置单线程。然后步骤S22在一定时间内模拟对象删除操作并记录删除的对象总数，优选地在一分钟内模拟对象删除操作并记录删除的对象总数。最后步骤S23基于删除对象总数和该一定时间估算每秒最大删除个数，即以删除对象总数与该一定时间的比值(取整)估算每秒最大删除个数Kmax。
在本发明的逻辑卷删除的控制方法的一些实施例中，步骤S2根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：S24识别逻辑卷的对象大小，并基于估算的每秒最大删除个数和逻辑卷的对象大小的乘积确定单线程最大删除速度。由于不同逻辑卷的对象大小可能不同，因此，步骤S24首先识别相应的逻辑卷的对象大小L，并基于估算的每秒最大删除个数Kmax和逻辑卷的对象大小L的乘积确定单线程最大删除速度Vmax，即
单线程最大删除速度Vmax＝每秒最大删除个数Kmax*对象大小L。
在本发明的逻辑卷删除的控制方法的一些实施例中，步骤S3基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略进一步包括：基于单线程最大删除速度、最大线程数、最大进程数制定第一删除速度控制策略、第二删除速度控制策略和第三删除速度控制策略，其中：
S3a：第一删除速度控制策略配置为建立最大进程数的进程并分别在各个进程中配置最大线程数的线程，各个线程采用等于单线程最大删除速度的删除速度；
S3b：第二删除速度控制策略配置为建立单进程并分别在单进程中配置单线程，单线程采用小于等于单线程最大删除速度的删除速度；
S3c：第三删除速度控制策略配置为建立小于最大进程数的进程并分别在各个进程中配置小于最大线程数的线程，所建立的进程数和所建立的线程数不同时为一并且各个线程采用小于等于单线程最大删除速度的删除速度。
具体地，基于单线程最大删除速度Vmax、最大线程数Nmax、最大进程数Mmax制定第一删除速度控制策略、第二删除速度控制策略和第三删除速度控制策略，其中第一删除速度控制策略用于不限制整体删除速度Vs的情况；第二删除速度控制策略用于限制整体删除速度Vs不得超过单线程最大删除速度Vmax的情况；第三删除速度控制策略用于限制整体删除速度Vs处于特定速度区间的情况，优选地限制整体删除速度Vs大于单线程最大删除速度Vmax且不超过特定删除速度阈值Vth的情况。
进一步地，一方面，S3a第一删除速度控制策略配置为建立最大进程数Mmax的进程并分别在各个进程中配置最大线程数Nmax的线程，各个线程采用等于单线程最大删除速度Vmax的删除速度，用以不限制整体删除速度Vs地执行逻辑卷删除操作。另一方面，S3b第二删除速度控制策略配置为建立单进程并分别在单进程中配置单线程(即单进程单线程)，单线程采用小于等于单线程最大删除速度Vmax的删除速度，用以限制整体删除速度Vs在不超过单线程最大删除速度Vmax的情况下执行逻辑卷删除操作。又一方面，S3c第三删除速度控制策略配置为建立小于最大进程数Mmax的进程并分别在各个进程中配置小于最大线程数Nmax的线程，所建立的进程数M和所建立的线程数N不同时为一并且各个线程采用小于等于单线程最大删除速度Vmax的删除速度，用以限制整体删除速度Vs在处于特定速度区间的情况下执行逻辑卷删除操作，优选地限制整体删除速度Vs在大于单线程最大删除速度Vmax且不超过特定删除速度阈值Vth的情况下执行逻辑卷删除操作。
在本发明的逻辑卷删除的控制方法的一些实施例中，第二删除速度控制策略进一步配置为根据逻辑卷的对象大小相应调整每秒删除个数使得删除速度小于等于单线程最大删除速度。也就是说，第二删除速度控制策略在建立单进程并分别在单进程中配置单线程(即单进程单线程)，单线程采用小于等于单线程最大删除速度Vmax的删除速度等基础上，进一步根据逻辑卷的对象大小L相应调整(优选地相应减少)每秒删除个数K(K<Kmax)使得删除速度Vs小于等于单线程最大删除速度Vmax，从而限制整体删除速度Vs在不超过单线程最大删除速度Vmax的情况下执行逻辑卷删除操作。
在本发明的逻辑卷删除的控制方法的一些实施例中，第三删除速度控制策略进一步配置为使各个线程采用单线程最大删除速度，相应调整建立的进程的数量以及分别在各个进程中配置的线程的数量使得单线程最大删除速度、建立的进程的数量、配置的线程的数量的乘积大于单线程最大删除速度且小于等于删除速度阈值。也就是说，第三删除速度控制策略在建立小于最大进程数Mmax的进程并分别在各个进程中配置小于最大线程数Nmax的线程，各个线程采用小于等于单线程最大删除速度Vmax的删除速度的基础上，进一步配置各个线程采用单线程最大删除速度Vmax，并相应调整所建立的进程的数量M(M<Mmax)以及分别在各个进程中配置的线程N(N<Nmax)的数量，使得单线程最大删除速度Vmax、建立的进程的数量M、配置的线程的数量N的乘积大于单线程最大删除速度Vmax且小于等于删除速度阈值Vth，即
Vs＝Vmax*M*N，且Vmax<Vs<Vth，
从而限制整体删除速度Vs在处于特定速度区间的情况下执行逻辑卷删除操作，优选地限制整体删除速度Vs在大于单线程最大删除速度Vmax且不超过特定删除速度阈值Vth的情况下执行逻辑卷删除操作。
在本发明的逻辑卷删除的控制方法的一些实施例中，第三删除速度控制策略进一步配置为计算删除速度阈值与单线程最大删除速度的比值，根据比值确定单个进程中待配置的线程数，并基于比值与线程数的商确定待建立的进程数。也就是说，第三删除速度控制策略在前述实施例的基础上，进一步包括，首先计算删除速度阈值Vth与单线程最大删除速度Vmax的比值D。根据比值D确定单个进程中待配置的线程数N，包括当比值D取整后小于等于最大线程数Nmax，则以比值D的取整作为待配置的线程数N；当比值D取整后大于最大线程数Nmax，则以最大线程数Nmax作为待配置的线程数N。最后基于比值D与线程数N的商确定待建立的进程数M。例如，通过以下公式确定待配置的线程数N和待建立的进程数M：
D＝Vth/Vmax；
N＝[D]，[D]≤Nmax；或N＝Nmax，[D]>Nmax；
M＝[[D]/N]。
其中，当以比值D的取整作为待配置的线程数N时，进程数M为1，这种情况下只需建立一个进程来执行逻辑卷删除操作，对集群现有业务的影响最小。
在本发明的逻辑卷删除的控制方法的一些实施例中，步骤S4响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷进一步包括：
S4a：响应于控制标识为无效，按照第一删除速度控制策略删除逻辑卷；
S4b：响应于控制标识为有效且不包含删除速度阈值，按照第二删除速度控制策略删除逻辑卷；
S4c：响应于控制标识为有效且包含删除速度阈值，按照第三删除速度控制策略删除逻辑卷。
在实际进行逻辑卷删除的过程中，为了更好地选择相应的策略，本发明在删除指令中增加了控制标识，该控制标识具有无效和有效两种状态，并且有效状态下可以选填参数(删除速度阈值Vth)。进一步地，控制标识的无效状态表示不限制整体删除速度Vs，控制标识的有效状态表示限制整体删除速度Vs，且若选填的参数为空(即不包含删除速度阈值Vth)表示限制整体删除速度Vs不得超过单线程最大删除速度Vmax；若选填的参数不为空(即包含删除速度阈值Vth)表示限制整体删除速度Vs处于特定速度区间，优选地限制整体删除速度Vs大于单线程最大删除速度Vmax且不超过特定删除速度阈值Vth。
进而，当接收到对逻辑卷的删除指令时，若该删除指令中的控制标识为无效，则S4a按照前述第一删除速度控制策略执行逻辑卷删除的操作；若该删除指令中的控制标识为有效且不包含删除速度阈值Vth，则S4b按照前述第二删除速度控制策略执行逻辑卷删除的操作；若该删除指令中的控制标识为有效且包含删除速度阈值Vth，则S4b按照前述第三删除速度控制策略执行逻辑卷删除的操作。利用上述步骤实现了灵活地控制逻辑卷删除速度，进而针对集群的不同情况和需求控制逻辑卷的删除，限制了逻辑卷删除操作对集群现有业务的影响。
另一方面，本发明还提出了一种逻辑卷删除的控制装置100。图2示出了根据本发明的逻辑卷删除的控制装置的实施例的示意图。在如图2所示的实施例中，该装置100至少包括：
极值参数配置模块M10，该极值参数配置模块M10配置为根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据各节点的软硬件配置确定最大线程数；
删除速度估算模块M20，该删除速度估算模块M20配置为根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
控制策略生成模块M30，该控制策略生成模块M30配置为基于单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略；
控制策略执行模块M40，该控制策略执行模块M40配置为响应于接收到对逻辑卷的删除指令，根据删除指令中的控制标识按照多个删除速度控制策略之一删除逻辑卷。
此外，本发明进一步提出了一种逻辑卷删除的控制设备，其中该设备包括：至少一个处理器；和存储器，该存储器存储有处理器可运行的程序指令，该程序指令在被处理器运行时执行前述逻辑卷删除的控制方法的实施例任一项的步骤。
本发明实施例公开所述的装置、设备等可为各种电子终端设备，例如手机、个人数字助理(PDA)、平板电脑(PAD)、智能电视等，也可以是大型终端设备，如服务器等，因此本发明实施例公开的保护范围不应限定为某种特定类型的装置、设备。本发明实施例公开所述的客户端可以是以电子硬件、计算机软件或两者的组合形式应用于上述任意一种电子终端设备中。
本文所述的计算机可读存储介质(例如存储器)可以是易失性存储器或非易失性存储器，或者可以包括易失性存储器和非易失性存储器两者。作为例子而非限制性的，非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦写可编程ROM(EEPROM)或快闪存储器。易失性存储器可以包括随机存取存储器(RAM)，该RAM可以充当外部高速缓存存储器。作为例子而非限制性的，RAM可以以多种形式获得，比如同步RAM(DRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据速率SDRAM(DDR SDRAM)、增强SDRAM(ESDRAM)、同步链路DRAM(SLDRAM)、以及直接Rambus RAM(DRRAM)。所公开的方面的存储设备意在包括但不限于这些和其它合适类型的存储器。
采用上述技术方案，本发明至少具有如下有益效果：根据集群的情况合理确定单线程最大删除速度、最大线程数、最大进程数，并基于上述确定的单线程最大删除速度、最大线程数、最大进程数制定多个删除速度控制策略分别用于针对不同情况和需求控制逻辑卷的整体删除速度，限制了逻辑卷删除操作对集群现有业务的影响，从而提供了更大的运维灵活性，进而提高了产品竞争力。
应当理解的是，在技术上可行的情况下，以上针对不同实施例所列举的技术特征可以相互组合，从而形成本发明范围内的另外实施例。此外，本文所述的特定示例和实施例是非限制性的，并且可以对以上所阐述的结构、步骤及顺序做出相应修改而不脱离本发明的保护范围。
在本申请中，反意连接词的使用旨在包括连接词。定或不定冠词的使用并不旨在指示基数。具体而言，对“该”对象或“一”和“一个”对象的引用旨在表示多个这样对象中可能的一个。然而，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。此外，可以使用连接词“或”来传达同时存在的特征，而不是互斥方案。换句话说，连接词“或”应理解为包括“和/或”。术语“包括”是包容性的并且具有与“包含”相同的范围。
上述实施例，特别是任何“优选”实施例是实施方式的可能示例，并且仅仅为了清楚理解本发明的原理而提出。在基本上不脱离本文描述的技术的精神和原理的情况下，可以对上述实施例做出许多变化和修改。所有修改旨在被包括在本公开的范围内。

Claims (8)

1.一种逻辑卷删除的控制方法，其特征在于，所述方法包括以下步骤：
根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据所述各节点的软硬件配置确定最大线程数；
根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
基于所述单线程最大删除速度、所述最大线程数、所述最大进程数制定多个删除速度控制策略；
响应于接收到对逻辑卷的删除指令，根据所述删除指令中的控制标识按照所述多个删除速度控制策略之一删除所述逻辑卷；
其中，所述基于所述单线程最大删除速度、所述最大线程数、所述最大进程数制定多个删除速度控制策略进一步包括：
基于所述单线程最大删除速度、所述最大线程数、所述最大进程数制定第一删除速度控制策略、第二删除速度控制策略和第三删除速度控制策略，其中：
所述第一删除速度控制策略配置为建立所述最大进程数的进程并分别在各个进程中配置所述最大线程数的线程，各个线程采用等于所述单线程最大删除速度的删除速度；
所述第二删除速度控制策略配置为建立单进程并分别在所述单进程中配置单线程，所述单线程采用小于等于所述单线程最大删除速度的删除速度；
所述第三删除速度控制策略配置为建立小于所述最大进程数的进程并分别在各个进程中配置小于所述最大线程数的线程，所建立的进程数和所建立的线程数不同时为一并且各个线程采用小于等于所述单线程最大删除速度的删除速度；
所述响应于接收到对逻辑卷的删除指令，根据所述删除指令中的控制标识按照所述多个删除速度控制策略之一删除所述逻辑卷进一步包括：
响应于所述控制标识为无效，按照所述第一删除速度控制策略删除所述逻辑卷；
响应于所述控制标识为有效且不包含删除速度阈值，按照所述第二删除速度控制策略删除所述逻辑卷；
响应于所述控制标识为有效且包含删除速度阈值，按照所述第三删除速度控制策略删除所述逻辑卷。
2.根据权利要求1所述的控制方法，其特征在于，所述根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：
在测试节点建立单进程并在所述单进程中配置单线程；
在预定时间内模拟对象删除操作并记录删除的对象总数；
基于所述删除对象总数和所述预定时间估算所述每秒最大删除个数。
3.根据权利要求2所述的控制方法，其特征在于，所述根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度进一步包括：
识别所述逻辑卷的对象大小，并基于所述估算的每秒最大删除个数和所述逻辑卷的对象大小的乘积确定所述单线程最大删除速度。
4.根据权利要求1所述的控制方法，其特征在于，所述第二删除速度控制策略还配置为根据逻辑卷的对象大小相应调整每秒删除个数使得所述删除速度小于等于所述单线程最大删除速度。
5.根据权利要求1所述的控制方法，其特征在于，所述第三删除速度控制策略还配置为使所述各个线程采用所述单线程最大删除速度，相应调整建立的进程的数量以及分别在各个进程中配置的线程的数量使得所述单线程最大删除速度、所述建立的进程的数量、所述配置的线程的数量的乘积大于所述单线程最大删除速度且小于等于删除速度阈值。
6.根据权利要求5所述的控制方法，其特征在于，所述第三删除速度控制策略还配置为计算所述删除速度阈值与所述单线程最大删除速度的比值，根据所述比值确定单个进程中待配置的线程数，并基于所述比值与所述线程数的商确定待建立的进程数。
7.一种逻辑卷删除的控制装置，其特征在于，所述装置包括：
极值参数配置模块，所述极值参数配置模块配置为根据集群内的节点个数及各节点的业务状态确定最大进程数，并根据所述各节点的软硬件配置确定最大线程数；
删除速度估算模块，所述删除速度估算模块配置为根据估算的每秒最大删除个数和逻辑卷的对象大小确定单线程最大删除速度；
控制策略生成模块，所述控制策略生成模块配置为基于所述单线程最大删除速度、所述最大线程数、所述最大进程数制定多个删除速度控制策略；
控制策略执行模块，所述控制策略执行模块配置为响应于接收到对逻辑卷的删除指令，根据所述删除指令中的控制标识按照所述多个删除速度控制策略之一删除所述逻辑卷；
其中，所述控制策略生成模块还配置为：基于所述单线程最大删除速度、所述最大线程数、所述最大进程数制定第一删除速度控制策略、第二删除速度控制策略和第三删除速度控制策略，其中：所述第一删除速度控制策略配置为建立所述最大进程数的进程并分别在各个进程中配置所述最大线程数的线程，各个线程采用等于所述单线程最大删除速度的删除速度；所述第二删除速度控制策略配置为建立单进程并分别在所述单进程中配置单线程，所述单线程采用小于等于所述单线程最大删除速度的删除速度；所述第三删除速度控制策略配置为建立小于所述最大进程数的进程并分别在各个进程中配置小于所述最大线程数的线程，所建立的进程数和所建立的线程数不同时为一并且各个线程采用小于等于所述单线程最大删除速度的删除速度；
所述控制策略执行模块还配置为：响应于所述控制标识为无效，按照所述第一删除速度控制策略删除所述逻辑卷；响应于所述控制标识为有效且不包含删除速度阈值，按照所述第二删除速度控制策略删除所述逻辑卷；响应于所述控制标识为有效且包含删除速度阈值，按照所述第三删除速度控制策略删除所述逻辑卷。
8.一种逻辑卷删除的控制设备，其特征在于，所述设备包括：
至少一个处理器；和
存储器，所述存储器存储有处理器可运行的程序指令，所述程序指令在被处理器运行时执行权利要求1至6任一项所述的控制方法的步骤。
CN202010027114.0A 2020-01-10 2020-01-10 一种逻辑卷删除的控制方法、装置及设备 Active CN111258501B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010027114.0A CN111258501B (zh) 2020-01-10 2020-01-10 一种逻辑卷删除的控制方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010027114.0A CN111258501B (zh) 2020-01-10 2020-01-10 一种逻辑卷删除的控制方法、装置及设备

Publications (2)

Publication Number Publication Date
CN111258501A CN111258501A (zh) 2020-06-09
CN111258501B true CN111258501B (zh) 2022-07-08

Family

ID=70948687

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010027114.0A Active CN111258501B (zh) 2020-01-10 2020-01-10 一种逻辑卷删除的控制方法、装置及设备

Country Status (1)

Country Link
CN (1) CN111258501B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112114745B (zh) * 2020-08-20 2022-11-15 苏州浪潮智能科技有限公司 一种存储系统双活卷删除的方法和设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110083314A (zh) * 2019-05-07 2019-08-02 苏州浪潮智能科技有限公司 一种逻辑卷删除方法、系统及相关装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8347059B2 (en) * 2008-08-15 2013-01-01 International Business Machines Corporation Management of recycling bin for thinly-provisioned logical volumes

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110083314A (zh) * 2019-05-07 2019-08-02 苏州浪潮智能科技有限公司 一种逻辑卷删除方法、系统及相关装置

Also Published As

Publication number Publication date
CN111258501A (zh) 2020-06-09

Similar Documents

Publication Publication Date Title
US10637916B2 (en) Method and device for storage resource allocation for video cloud storage
CN109828721B (zh) 数据删除方法、装置、计算机设备及存储介质
JP5459325B2 (ja) キャッシュ装置、キャッシュプログラム、及び通信装置
CN108089814B (zh) 一种数据存储方法及装置
JP5594664B2 (ja) サービス品質に基づくストレージ階層化及び移動技法のためのシステム及び方法
CN106375404B (zh) 数据存储控制方法、数据存储方法、数据获取方法及装置
CN111245732B (zh) 一种流量控制方法、装置及设备
JP6330528B2 (ja) データ分割制御プログラム、データ分割制御方法、及び、データ分割制御装置
WO2017143957A1 (zh) 一种数据重分布的方法及装置
CN111857592A (zh) 基于对象存储系统的数据存储方法及装置、电子设备
US9557938B2 (en) Data retrieval based on storage device activation schedules
CN109857612A (zh) 一种数据写入操作的监控方法及其终端
CN109901798A (zh) 数据存储方法及装置
CN111258501B (zh) 一种逻辑卷删除的控制方法、装置及设备
WO2016183918A1 (zh) 存储空间处理方法及装置
CN106610870A (zh) 一种处理节点数量调整方法及装置
CN111008181A (zh) 一种分布式文件系统存储策略切换方法、系统、终端及存储介质
WO2020133962A1 (zh) 基于区块链的数据存储方法、相关设备及存储介质
CN116204311A (zh) Pod集群扩缩容方法、装置、计算机设备和存储介质
US9430338B2 (en) Method and computing device for recording log entries
WO2019133211A1 (en) Method, apparatus, and system for dynamic management of integrity-protected memory
CN109587218A (zh) 一种集群选举的方法和装置
CN113300966B (zh) 流量控制方法、装置、系统以及电子设备
CN115190177B (zh) 请求处理方法、装置、计算机设备、存储介质和程序产品
EP3166027B1 (en) Method and apparatus for determining hot page in database

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant