CN114115718B - 分布式块存储系统服务质量控制方法、装置、设备及介质 - Google Patents
分布式块存储系统服务质量控制方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN114115718B CN114115718B CN202111011827.9A CN202111011827A CN114115718B CN 114115718 B CN114115718 B CN 114115718B CN 202111011827 A CN202111011827 A CN 202111011827A CN 114115718 B CN114115718 B CN 114115718B
- Authority
- CN
- China
- Prior art keywords
- storage node
- distributed block
- quality
- storage system
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003908 quality control method Methods 0.000 title claims abstract description 25
- 238000012544 monitoring process Methods 0.000 claims abstract description 147
- 238000000034 method Methods 0.000 claims abstract description 39
- 238000004590 computer program Methods 0.000 claims description 12
- 238000010276 construction Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种分布式块存储系统服务质量控制方法、装置、设备、介质，该方法包括：接收客户端发送的连接建立请求，并根据连接建立请求建立与客户端之间的iSCSI连接；判断在建立iSCSI连接之前，第一存储节点是否已与任意客户端建立连接；如果否，则注册元数据监控模块，构建第一存储节点上的第一元数据监控列表，并通知分布式块存储系统中的各个第二存储节点更新第二存储节点上的第二元数据监控列表；根据第一元数据监控列表和分布式块存储系统的预设服务质量上限确定第一存储节点的第一服务质量控制参数。这样能够对分布式块存储系统进行服务质量控制，提高分布式块存储系统的易用性和可靠性。
Description
技术领域
本申请涉及存储技术领域，特别涉及一种分布式块存储系统服务质量控制方法、装置、设备、介质。
背景技术
传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。分布式块存储系统是将数据分散存储在多个独立的设备上，分布式存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。
对分布式块存储系统系统来说，一般使用多路径技术，即客户端通过多条链路访问分布式存储系统，一方面可以增加系统的数据吞吐量，另一方面在单链路故障时，其他链路可正常工作，提高了系统的可靠性。对于分布式存储系统的QoS(Quality of Service，服务质量)技术来说，由于多条链路上同时有数据通过，如何协调多条链路的数据总量是需要解决的问题。
发明内容
有鉴于此，本申请的目的在于提供一种分布式块存储系统服务质量控制方法、装置、设备、介质，能够对分布式块存储系统进行服务质量控制，提高分布式块存储系统的易用性和可靠性。其具体方案如下：
第一方面，本申请公开了一种分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，包括：
接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接；
判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接；
如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI 连接的存储节点的节点信息；
根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
可选地，所述根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：
根据所述第一元数据监控列表确定目标存储节点数，其中，所述目标存储节点为所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点；
利用所述目标存储节点数对所述分布式块存储系统的预设服务质量上限进行均分，得到所述第一存储节点的第一服务质量控制参数。
可选地，所述根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：
根据所述第一元数据监控列表和所述分布式块存储系统的预设令牌生成速度确定所述第一存储节点的第一令牌生成速度。
可选地，所述接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接之前，还包括：
接收iSCSI Server服务启动信息，其中，所述iSCSI Server服务启动信息中包括iSCSI Server服务数据；
利用所述iSCSI Server服务数据启动iSCSI Server服务。
可选地，还包括：
判断所述第一存储节点上与客户端之间的所有iSCSI连接是否均处于连接故障状态；
如果是，则断开所述第一存储节点上与客户端之间的所有iSCSI连接，并通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
可选地，还包括：
判断所述第一存储节点上的元数据监控模块心跳是否超时；
如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
第二方面，本申请公开了一种分布式块存储系统服务质量控制装置，应用于分布式块存储系统中的第一存储节点，包括：
连接建立模块，用于接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接；
判断模块，用于判断在建立所述iSCSI连接之前，所述第一存储节点是否与任意客户端建立连接；
元数据监控模块构建模块，用于在所述判断模块的判定结果为否时，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端进行iSCSI连接的存储节点的节点信息；
服务质量控制模块，用于根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
可选的，所述分布式块存储系统服务质量控制装置还包括异常处理模块，所述异常处理模块，用于：
判断所述第一存储节点上的元数据监控模块心跳是否超时；
如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
第三方面，本申请公开了一种电子设备，包括：
存储器和处理器；
其中，所述存储器，用于存储计算机程序；
所述处理器，用于执行所述计算机程序，以实现前述公开的分布式块存储系统服务质量控制方法。
第四方面，本申请公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述公开的分布式块存储系统服务质量控制方法。
可见，本申请公开了一种分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，包括：首先接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接。然后判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接。如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI 连接的存储节点的节点信息。然后再根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。也即，本申请中会利用元数据监控列表记录分布式块存储系统中对客户端提供数据服务的存储节点的信息，然后便可以直接根据元数据监控列表和分布式块存储系统的预设服务质量上限确定各个存储节点的服务质量控制参数，实现对分布式块存储系统中各个存储节点的服务质量控制，提高分布式块存储系统的易用性和可靠性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种分布式块存储系统服务质量控制方法流程图；
图2为本申请公开的一种具体的分布式块存储系统服务质量控制方法流程图；
图3为本申请公开的一种具体的分布式块存储系统结构示意图；
图4为本申请公开的一种分布式块存储系统服务质量控制装置结构示意图；
图5为本申请公开的一种电子设备结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
目前，对分布式块存储系统系统来说，一般使用多路径技术，即客户端通过多条链路访问分布式存储系统，一方面可以增加系统的数据吞吐量，另一方面在单链路故障时，其他链路可正常工作，提高了系统的可靠性。对于分布式存储系统的服务质量技术来说，由于多条链路上同时有数据通过，如何协调多条链路的数据总量是需要解决的问题。有鉴于此，本申请提出了一种分布式块存储系统服务质量控制方法，能够对分布式块存储系统进行服务质量控制，提高分布式块存储系统的易用性和可靠性。
参见图1所示，本申请实施例公开了一种分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，该方法包括：
步骤S11：接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接。
在实际应用中，分布式块存储系统中可以包括多个存储节点，所述第一存储节点可以为所述分布式块存储系统中的任意一个存储节点，也即，所述第一存储节点不限定为所述分布式块存储系统中的哪一个存储节点，可以将任意一个存储节点作为所述第一存储节点。
所述第一存储节点需要对外提供存储服务，所以所述第一存储节点需要接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI(Internet Small Computer System Interface)连接。也即，客户端需要与分布式块存储系统建立连接时，会先向所述分布式块存储系统发送连接建立请求，所述第一存储节点便需要接收所述连接建立请求，在接收到所述连接建立请求之后，便可以建立所述第一存储节点和所述客户端之间的 iSCSI连接。
步骤S12：判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接。
为了提高所述分布式块存储系统的可靠性，一个客户端可以与分布式块存储系统建立多条连接，分布式块存储系统中的一个存储节点可以与多个客户端建立连接。所以所述第一存储节点在建立所述iSCSI连接之后，还需要判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接，也即，判断所述iSCSI连接是否为所述第一存储节点与客户端之间建立的第一条连接。
步骤S13：如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点的节点信息。
如果在建立所述iSCSI连接之前，所述第一存储节点还未与任意客户端建立连接，表示所述iSCSI连接是所述第一存储节点与客户端建立的第一条连接，所以所述第一存储节点需要注册元数据监控模块，也即需要先注册 watcher，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点的节点信息。
也即，所述第一存储节点需要注册元数据监控模块，及构建所述第一存储节点上的第一元数据监控列表，然后通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，在更新完之后，所述第一元数据监控列表和所述第二元数据监控列表均包括所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点的节点信息。
如果在建立所述iSCSI连接之前，所述第一存储节点已与任意客户端建立连接，则直接更新所述第一存储节点上的第一元数据监控列表，并通知所述第二存储节点更新第二元数据监控列表即可。
步骤S14：根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
可以理解的是，构建所述第一元数据监控列表之后，还需要根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
具体的，根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：根据所述第一元数据监控列表确定目标存储节点数，其中，所述目标存储节点为所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点；利用所述目标存储节点数对所述分布式块存储系统的预设服务质量上限进行均分，得到所述第一存储节点的第一服务质量控制参数。
可见，本申请公开了一种分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，包括：首先接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接。然后判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接。如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI 连接的存储节点的节点信息。然后再根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。也即，本申请中会利用元数据监控列表记录分布式块存储系统中对客户端提供数据服务的存储节点的信息，然后便可以直接根据元数据监控列表和分布式块存储系统的预设服务质量上限确定各个存储节点的服务质量控制参数，实现对分布式块存储系统中各个存储节点的服务质量控制，提高分布式块存储系统的易用性和可靠性。
参见图2所示，本申请实施例公开了一种具体的分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，该方法包括：
步骤S21：接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接。
在接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接之前，还包括：接收iSCSI Server服务启动信息，其中，所述iSCSI Server服务启动信息中包括iSCSI Server服务数据；利用所述 iSCSI Server服务数据启动iSCSIServer服务。
也即，需要先在所述第一存储节点上启动iSCSI Server服务，具体的，就是将iSCSI Server服务启动信息发送给所述第一存储节点，所述第一存储节点便需要接收所述iSCSI Server服务启动信息，然后利用所述iSCSI Server服务启动信息中的iSCSI Server服务数据启动iSCSI Server服务。
步骤S22：判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接。
步骤S23：如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点的节点信息。
步骤S24：根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
在构建所述第一元数据监控列表之后，还需要根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
在实际应用中，根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：根据所述第一元数据监控列表和所述分布式块存储系统的预设令牌生成速度确定所述第一存储节点的第一令牌生成速度。也即，可以通过控制令牌生成速度控制所述分布式块存储系统的服务质量。
参见图3所示，OpenStack上的客户端与分布式块存储系统中各存储节点建立有iSCSI连接，存储节点上有iSCSI的Tgtd，在每个存储节点第一次建立iSCSI 连接时，注册watcher(也即元数据监控模块)并构建自身watcher列表(也即元数据监控列表)，并通知其他存储节点更新watcher列表，各个存储节点根据watcher列表中的存储节点数均分分布式块存储系统的预设QoS(也即服务质量)上限，初始化令牌桶并为数据请求生成令牌。
步骤S25：判断所述第一存储节点上与客户端之间的所有iSCSI连接是否均处于连接故障状态。
步骤S26：如果是，则断开所述第一存储节点上与客户端之间的所有iSCSI 连接，并通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
所述第一存储节点还需要判断所述第一存储节点上与客户端之间的所有 iSCSI连接是否均处于连接故障状态。如果所述第一存储节点上与客户端之间的所有iSCSI连接均处于连接故障状态，则断开所述第一存储节点上与客户端之间的所有iSCSI连接，并通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
所述第一存储节点还需要判断所述第一存储节点上的元数据监控模块心跳是否超时；如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
也即，所述第一存储节点上的元数据监控模块与上图3中的Rados保持心跳，所以所述第一存储节点需要判断自身的元数据监控模块心跳是否超时，如果是，则需要通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
参见图4所示，本申请实施例公开了一种分布式块存储系统服务质量控制装置，应用于分布式块存储系统中的第一存储节点，包括：
连接建立模块11，用于接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接；
判断模块12，用于判断在建立所述iSCSI连接之前，所述第一存储节点是否与任意客户端建立连接；
元数据监控模块构建模块13，用于在所述判断模块的判定结果为否时，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端进行iSCSI连接的存储节点的节点信息；
服务质量控制模块14，用于根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
可见，本申请公开了一种分布式块存储系统服务质量控制方法，应用于分布式块存储系统中的第一存储节点，包括：首先接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接。然后判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接。如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI 连接的存储节点的节点信息。然后再根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。也即，本申请中会利用元数据监控列表记录分布式块存储系统中对客户端提供数据服务的存储节点的信息，然后便可以直接根据元数据监控列表和分布式块存储系统的预设服务质量上限确定各个存储节点的服务质量控制参数，实现对分布式块存储系统中各个存储节点的服务质量控制，提高分布式块存储系统的易用性和可靠性。
在一些具体的实施例中，所述服务质量控制模块14，用于：
根据所述第一元数据监控列表确定目标存储节点数，其中，所述目标存储节点为所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点；
利用所述目标存储节点数对所述分布式块存储系统的预设服务质量上限进行均分，得到所述第一存储节点的第一服务质量控制参数。
在一些具体的实施例中，所述服务质量控制模块14，用于：
根据所述第一元数据监控列表和所述分布式块存储系统的预设令牌生成速度确定所述第一存储节点的第一令牌生成速度。
在一些具体的实施例中，还包括服务启动模块，用于：
接收iSCSI Server服务启动信息，其中，所述iSCSI Server服务启动信息中包括iSCSI Server服务数据；
利用所述iSCSI Server服务数据启动iSCSI Server服务。
在一些具体的实施例中，还包括异常处理模块，所述异常处理模块，用于：
判断所述第一存储节点上与客户端之间的所有iSCSI连接是否均处于连接故障状态；
如果是，则断开所述第一存储节点上与客户端之间的所有iSCSI连接，并通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
在一些具体的实施例中，还包括异常处理模块，所述异常处理模块，用于：
判断所述第一存储节点上的元数据监控模块心跳是否超时；
如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
图5为本申请实施例提供的一种电子设备20的结构示意图，该电子设备20 具体可以实现前述实施例中公开的分布式块存储系统服务质量控制方法步骤。
通常，本实施例中的电子设备20包括：处理器21和存储器22。
其中，处理器21可以包括一个或多个处理核心，比如四核心处理器、八核心处理器等。处理器21可以采用DSP(digital signal processing,数字信号处理)、FPGA(field-programmable gate array,现场可编程们阵列)、PLA (programmable logic array,可编程逻辑阵列)中的至少一种硬件来实现。处理器21也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(central processing unit,中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器21可以集成有GPU(graphics processing unit,图像处理器)，GPU 用于负责显示屏所需要显示的图像的渲染和绘制。一些实施例中，处理器21 可以包括AI(artificial intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器22可以包括一个或多个计算机可读存储介质，计算机可读存储介质可以是非暂态的。存储器22还可以包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。本实施例中，存储器22至少用于存储以下计算机程序221，其中，该计算机程序被处理器21加载并执行之后，能够实现前述任一实施例中公开的分布式块存储系统服务质量控制方法步骤。
在一些实施例中，电子设备20还可包括有显示屏23、输入输出接口24、通信接口25、传感器26、电源27以及通信总线28。
本技术领域人员可以理解，图5中示出的结构并不构成对电子设备20的限定，可以包括比图示更多或更少的组件。
进一步的，本申请实施例还公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述任一实施例中公开的分布式块存储系统服务质量控制方法。
其中，关于上述分布式块存储系统服务质量控制方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或者操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得一系列包含其他要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本申请所提供的一种分布式块存储系统服务质量控制方法、装置、设备、介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种分布式块存储系统服务质量控制方法，其特征在于，应用于分布式块存储系统中的第一存储节点，包括：
接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接；
判断在建立所述iSCSI连接之前，所述第一存储节点是否已与任意客户端建立连接；
如果否，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点的节点信息；
根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
2.根据权利要求1所述的分布式块存储系统服务质量控制方法，其特征在于，所述根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：
根据所述第一元数据监控列表确定目标存储节点数，其中，所述目标存储节点为所述分布式块存储系统中已与客户端建立iSCSI连接的存储节点；
利用所述目标存储节点数对所述分布式块存储系统的预设服务质量上限进行均分，得到所述第一存储节点的第一服务质量控制参数。
3.根据权利要求1所述的分布式块存储系统服务质量控制方法，其特征在于，所述根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，包括：
根据所述第一元数据监控列表和所述分布式块存储系统的预设令牌生成速度确定所述第一存储节点的第一令牌生成速度。
4.根据权利要求1所述的分布式块存储系统服务质量控制方法，其特征在于，所述接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接之前，还包括：
接收iSCSI Server服务启动信息，其中，所述iSCSI Server服务启动信息中包括iSCSIServer服务数据；
利用所述iSCSI Server服务数据启动iSCSI Server服务。
5.根据权利要求1所述的分布式块存储系统服务质量控制方法，其特征在于，还包括：
判断所述第一存储节点上与客户端之间的所有iSCSI连接是否均处于连接故障状态；
如果是，则断开所述第一存储节点上与客户端之间的所有iSCSI连接，并通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
6.根据权利要求1至5任一项所述的分布式块存储系统服务质量控制方法，其特征在于，还包括：
判断所述第一存储节点上的元数据监控模块心跳是否超时；
如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
7.一种分布式块存储系统服务质量控制装置，其特征在于，应用于分布式块存储系统中的第一存储节点，包括：
连接建立模块，用于接收客户端发送的连接建立请求，并根据所述连接建立请求建立与所述客户端之间的iSCSI连接；
判断模块，用于判断在建立所述iSCSI连接之前，所述第一存储节点是否与任意客户端建立连接；
元数据监控模块构建模块，用于在所述判断模块的判定结果为否时，则注册元数据监控模块，构建所述第一存储节点上的第一元数据监控列表，并通知所述分布式块存储系统中的各个第二存储节点更新所述第二存储节点上的第二元数据监控列表，其中，所述第二存储节点为所述分布式块存储系统中除了所述第一存储节点外的已注册元数据监控模块的节点，元数据监控列表中保存有所述分布式块存储系统中已与客户端进行iSCSI连接的存储节点的节点信息；
服务质量控制模块，用于根据所述第一元数据监控列表和所述分布式块存储系统的预设服务质量上限确定所述第一存储节点的第一服务质量控制参数，以便根据所述第一服务质量控制参数控制所述第一存储节点的流量。
8.根据权利要求7所述的分布式块存储系统服务质量控制装置，其特征在于，还包括异常处理模块，所述异常处理模块，用于：
判断所述第一存储节点上的元数据监控模块心跳是否超时；
如果是，则通知所述第二存储节点更新所述第二元数据监控列表，以便所述第二存储节点将所述第一存储节点的节点信息从所述第二元数据监控列表中删除，并根据更新后第二元数据监控列表和所述分布式块存储系统的预设服务质量上限调整所述第二存储节点的第二服务质量控制参数。
9.一种电子设备，其特征在于，包括：
存储器和处理器；
其中，所述存储器，用于存储计算机程序；
所述处理器，用于执行所述计算机程序，以实现权利要求1至6任一项所述的分布式块存储系统服务质量控制方法。
10.一种计算机可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的分布式块存储系统服务质量控制方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111011827.9A CN114115718B (zh) | 2021-08-31 | 2021-08-31 | 分布式块存储系统服务质量控制方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111011827.9A CN114115718B (zh) | 2021-08-31 | 2021-08-31 | 分布式块存储系统服务质量控制方法、装置、设备及介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114115718A CN114115718A (zh) | 2022-03-01 |
| CN114115718B true CN114115718B (zh) | 2024-03-29 |
Family
ID=80441039
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111011827.9A Active CN114115718B (zh) | 2021-08-31 | 2021-08-31 | 分布式块存储系统服务质量控制方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114115718B (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104683374A (zh) * | 2013-11-28 | 2015-06-03 | 北京华云网际科技有限公司 | 一种分布式存储的缓存更新方法及分布式存储系统 |
| CN104765661A (zh) * | 2014-12-30 | 2015-07-08 | 深圳市安云信息科技有限公司 | 一种云存储服务中元数据服务节点的多节点热备方法 |
| CN105072201A (zh) * | 2015-08-28 | 2015-11-18 | 北京奇艺世纪科技有限公司 | 一种分布式存储系统及其存储质量控制方法及装置 |
| CN107483640A (zh) * | 2017-09-25 | 2017-12-15 | 山东浪潮云服务信息科技有限公司 | 一种缓存更新方法、服务器及业务系统 |
| CN108200151A (zh) * | 2017-12-29 | 2018-06-22 | 创新科存储技术（深圳）有限公司 | 一种分布式存储系统中ISCSI Target负载均衡方法和装置 |
| CN109542482A (zh) * | 2018-11-19 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种块存储服务升级方法、装置、设备及可读存储介质 |
| CN109600436A (zh) * | 2018-12-10 | 2019-04-09 | 浪潮电子信息产业股份有限公司 | 一种分布式iscsi服务实现方法、系统及相关装置 |
| WO2019085334A1 (zh) * | 2017-11-01 | 2019-05-09 | 平安科技（深圳）有限公司 | 分布式存储方法、控制服务器及计算机可读存储介质 |
| CN110633046A (zh) * | 2018-06-22 | 2019-12-31 | 北京东土科技股份有限公司 | 一种分布式系统的存储方法、装置、存储设备及存储介质 |
| CN111694635A (zh) * | 2020-04-17 | 2020-09-22 | 新华三大数据技术有限公司 | 一种服务质量控制方法及装置 |
| WO2021129367A1 (zh) * | 2019-12-23 | 2021-07-01 | 深圳前海微众银行股份有限公司 | 一种监控分布式存储系统的方法及装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11258877B2 (en) * | 2018-07-26 | 2022-02-22 | Netapp, Inc. | Methods for managing workloads in a storage system and devices thereof |
| CN109254726A (zh) * | 2018-08-16 | 2019-01-22 | 华为技术有限公司 | 分布式存储系统中服务质量保障方法、控制节点及系统 |
| US11627091B2 (en) * | 2019-05-20 | 2023-04-11 | Citrix Systems Inc. | Systems and methods for managing streams of packets via intermediary devices |
-
2021
- 2021-08-31 CN CN202111011827.9A patent/CN114115718B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104683374A (zh) * | 2013-11-28 | 2015-06-03 | 北京华云网际科技有限公司 | 一种分布式存储的缓存更新方法及分布式存储系统 |
| CN104765661A (zh) * | 2014-12-30 | 2015-07-08 | 深圳市安云信息科技有限公司 | 一种云存储服务中元数据服务节点的多节点热备方法 |
| CN105072201A (zh) * | 2015-08-28 | 2015-11-18 | 北京奇艺世纪科技有限公司 | 一种分布式存储系统及其存储质量控制方法及装置 |
| CN107483640A (zh) * | 2017-09-25 | 2017-12-15 | 山东浪潮云服务信息科技有限公司 | 一种缓存更新方法、服务器及业务系统 |
| WO2019085334A1 (zh) * | 2017-11-01 | 2019-05-09 | 平安科技（深圳）有限公司 | 分布式存储方法、控制服务器及计算机可读存储介质 |
| CN108200151A (zh) * | 2017-12-29 | 2018-06-22 | 创新科存储技术（深圳）有限公司 | 一种分布式存储系统中ISCSI Target负载均衡方法和装置 |
| CN110633046A (zh) * | 2018-06-22 | 2019-12-31 | 北京东土科技股份有限公司 | 一种分布式系统的存储方法、装置、存储设备及存储介质 |
| CN109542482A (zh) * | 2018-11-19 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种块存储服务升级方法、装置、设备及可读存储介质 |
| CN109600436A (zh) * | 2018-12-10 | 2019-04-09 | 浪潮电子信息产业股份有限公司 | 一种分布式iscsi服务实现方法、系统及相关装置 |
| WO2021129367A1 (zh) * | 2019-12-23 | 2021-07-01 | 深圳前海微众银行股份有限公司 | 一种监控分布式存储系统的方法及装置 |
| CN111694635A (zh) * | 2020-04-17 | 2020-09-22 | 新华三大数据技术有限公司 | 一种服务质量控制方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114115718A (zh) | 2022-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8396961B2 (en) | Dynamic control of transaction timeout periods | |
| CN109783151B (zh) | 规则变更的方法和装置 | |
| JP2009244945A (ja) | 負荷分散プログラム、負荷分散方法、負荷分散装置およびそれを含むシステム | |
| CN108628660A (zh) | 一种虚拟机扩缩容方法及虚拟管理设备 | |
| CN108737573A (zh) | 一种分布式存储集群及其服务响应控制方法、装置和设备 | |
| CN112231108A (zh) | 任务处理方法、装置、计算机可读存储介质及服务器 | |
| CN107872517A (zh) | 一种数据处理方法及装置 | |
| CN111400041A (zh) | 服务器配置文件的管理方法、装置及计算机可读存储介质 | |
| CN114327804B (zh) | 基于区块链的分布式事务处理方法、装置、设备和介质 | |
| EP3984198A1 (en) | Smart contract information redirect to updated version of smart contract | |
| CN108200151B (zh) | 一种分布式存储系统中ISCSI Target负载均衡方法和装置 | |
| CN110502581A (zh) | 分布式数据库系统监测方法及装置 | |
| CN114115718B (zh) | 分布式块存储系统服务质量控制方法、装置、设备及介质 | |
| CN112486912A (zh) | 一种文件转换系统、方法、电子设备及存储介质 | |
| CN116455830A (zh) | 实现存储网关高可用分布式qos的方法 | |
| CN113641688B (zh) | 节点更新方法、相关装置及计算机程序产品 | |
| CN116192885A (zh) | 高可用集群架构人工智能实验云平台数据处理方法及系统 | |
| JP2008250427A (ja) | 情報処理システムに用いられるバージョンアップ装置及び該装置を備えた情報処理システム並びに情報処理システムをバージョンアップするためのプログラム | |
| CN110457392B (zh) | 副本读写方法及装置 | |
| CN113806801B (zh) | 交易信息上链方法、装置、计算机设备及存储介质 | |
| JP7289381B2 (ja) | 情報を取得するための方法および装置、電子機器、記憶媒体並びにコンピュータプログラム | |
| CN115934299B (zh) | Yarn作业的迁移系统及方法 | |
| CN113596109B (zh) | 业务请求运行方法、系统、装置、设备和存储介质 | |
| CN115102924B (zh) | 集群地址切换方法、装置、计算机设备及存储介质 | |
| CN117119058B (zh) | Ceph分布式存储集群中存储节点优化方法及相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |