CN114968095A - 分布式硬盘管理方法、系统、电子设备及可读存储介质 - Google Patents

分布式硬盘管理方法、系统、电子设备及可读存储介质 Download PDF

Info

Publication number
CN114968095A
CN114968095A CN202210513901.5A CN202210513901A CN114968095A CN 114968095 A CN114968095 A CN 114968095A CN 202210513901 A CN202210513901 A CN 202210513901A CN 114968095 A CN114968095 A CN 114968095A
Authority
CN
China
Prior art keywords
hard disk
service
monitoring
distributed
disk table
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210513901.5A
Other languages
English (en)
Inventor
韩磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Unisinsight Technology Co Ltd
Original Assignee
Chongqing Unisinsight Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Unisinsight Technology Co Ltd filed Critical Chongqing Unisinsight Technology Co Ltd
Priority to CN202210513901.5A priority Critical patent/CN114968095A/zh
Publication of CN114968095A publication Critical patent/CN114968095A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及硬件管理技术领域，公开了一种分布式硬盘管理方法、系统、电子设备及可读存储介质，该方法通过获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表，通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。

Description

分布式硬盘管理方法、系统、电子设备及可读存储介质
技术领域
本发明涉及硬件管理技术领域，尤其涉及一种分布式硬盘管理方法、系统、电子设备及可读存储介质。
背景技术
分布式数据库通常使用较小的服务器系统，每台服务器可单独放在一个地方，每台服务器中都可能有DBMS((Database Management System，数据库管理系统)的一份完整拷贝副本，或者部分拷贝副本，并具有自己局部的数据库，位于不同地点的许多服务器通过网络互相连接，共同组成一个完整的、全局的逻辑上集中、物理上分布的大型数据库。
目前，分布式数据库是一种布局复杂的存储系统，其中，它的服务器、硬盘之间的关系相对固化，耦合度较高，不便于对分布式数据库中的硬盘进行扩容和缩减，进而导致硬盘管理难度较大，不利于对分布式数据库的使用。
发明内容
为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。所述概括不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。
鉴于以上所述现有技术的缺点，本发明公开了一种分布式硬盘管理方法、系统、电子设备及可读存储介质，以降低服务器与硬盘之间的耦合度，进而便于对硬盘进行管理。
本发明公开了一种分布式硬盘管理方法，包括：获取与多个分布式硬盘连接的服务集群，其中，所述服务集群包括主服务以及监听服务；获取所述监听服务对应的监听服务ID(Identity Document，身份标识号)，基于所述监听服务ID生成各监听硬盘对应的硬件ID，其中，所述监听硬盘包括至少一个分布式硬盘；利用所述监听服务对所述监听硬盘进行监听，根据监听结果和所述硬件ID生成所述监听硬盘对应的监听硬盘表；利用所述主服务获取所述分布式硬盘对应的总硬盘表，并根据所述监听硬盘表更新所述总硬盘表。
可选地，所述主服务通过以下方法获取总硬盘表：所述主服务对各所述分布式硬盘分配名称ID，并将各所述分布式硬盘对应的硬盘状态信息确定为离线状态；根据所述名称ID和所述硬盘状态信息生成所述分布式硬盘对应的总硬盘表。
可选地，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：所述分布式硬盘包括多个硬盘数据块以及各所述硬盘数据块对应的数据块ID；若所述主服务接收到目标数据块对应的数据块申请请求，生成所述目标数据块对应的数据块地址，其中，所述目标数据块为任一所述硬盘数据块，所述数据块地址包括所述目标数据块所在分布式硬盘的名称ID，以及所述目标数据块对应的数据块ID；若所述主服务接收到目标地址对应的数据块访问请求，则将所述目标地址中名称ID对应的硬件ID确定为目标ID，在所述目标ID对应的分布式硬盘中，对所述目标地址中数据块ID对应的硬盘数据块进行访问，其中，所述目标地址为任一数据块地址。
可选地，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：若所述主服务接收到待删除硬盘对应的硬盘删除指令，则所述主服务从所述总硬盘表中删除所述待删除硬盘对应的状态信息，其中，所述待删除硬盘为任一分布式硬盘；从所述数据库端中删除所述待删除硬盘对应的硬盘配置信息，并将所述待删除硬盘对应的名称ID加入预设的硬盘删除表中。
可选地，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：若所述监听服务包括多个，将任意两个监听服务分别作为第一服务和第二服务，将所述第一服务对应的任一监听硬盘确定为第一硬盘；若所述第一服务无法连接到所述第一硬盘，则所述第一服务生成第一硬盘表，将所述第一硬盘表发送至所述主服务，其中，所述第一硬盘表的第一硬盘对应的当前硬盘状态为离线状态；所述主服务接收到所述第一硬盘表，根据所述第一硬盘表将所述总硬盘表中的第一硬盘对应的硬盘状态信息确定为离线状态；若所述第二服务连接到所述第一硬盘，则所述第二服务生成第二硬盘表，将所述第二硬盘表发送至所述主服务，其中，所述第二硬盘表的第一硬盘对应的当前硬盘状态为上线状态；所述主服务接收到所述第二硬盘表，根据所述第二硬盘表将所述总硬盘表中的第一硬盘对应的硬盘状态信息确定为上线状态，并根据所述第二服务对应的监听服务ID更新所述第一硬盘对应的硬件ID。
可选地，所述主服务根据所述监听硬盘表更新预设的总硬盘表之后，所述方法还包括：所述主服务将更新后的总硬盘表确定为新的总硬盘表；每经过第一预设时间段，所述监听服务生成监听硬盘表，将生成的监听硬盘表发送至所述主服务，其中，所述监听硬盘表包括监听版本信息，以及各所述监听硬盘对应的当前硬盘状态；若所述主服务在第二预设时间段之内接收到所述监听服务发送的监听硬盘表，则获取所述监听服务对应的历史版本信息，将所述监听版本信息和所述历史版本信息进行比较；若比较结果为相同，则不更新总硬盘表；若比较结果为不同，则基于所述当前硬盘状态，更新所述总硬盘表中各所述监听硬盘对应的硬盘状态信息，并基于所述监听版本信息更新所述监听服务对应的历史版本信息；若所述主服务在第二预设时间段之内未接收到所述监听服务发送的监听硬盘表，则将所述总硬盘表中各所述监听硬盘对应的硬盘状态信息确定为离线状态。
可选地，通过以下方式获取服务集群：获取服务器端与数据库端，建立所述服务器端与所述数据库端之间的连接，其中，所述数据库端包括多个分布式硬盘，所述服务器端包括多个元数据服务和多个总控服务；根据预设的集群信息配置所述元数据服务和所述总控服务，将任一元数据服务确定为主服务，并将至少一部分所述总控服务确定为监听服务；建立所述主服务与所述监听服务之间的连接，得到包括所述主服务与所述监听服务在内的服务集群。
可选地，获取所述监听服务对应的监听服务ID，包括：所述监听服务根据预设的状态ID确定所述监听服务是否处于初始化状态；若所述监听服务处于初始化状态，则所述监听服务发送监听服务ID请求至所述主服务，触发所述主服务根据所述集群信息确定所述监听服务与所述主服务是否属于同一集群；若所述监听服务与所述主服务属于同一集群，则所述主服务对所述监听服务分配监听服务ID，发送所述监听服务ID至所述监听服务；若所述监听服务与所述主服务不属于同一集群，则向所述监听服务返回请求失败；若所述监听服务不处于初始化状态，则将所述状态ID确定为所述监听服务对应的监听服务ID。
可选地，基于所述监听服务ID生成各监听硬盘对应的硬件ID，包括：对各所述监听硬盘进行编号，得到各所述监听硬盘对应的硬盘序号；分别生成各所述监听硬盘对应的硬件ID，其中，所述监听硬盘的硬件ID包括所述监听服务对应的监听服务ID，以及所述监听硬盘对应的硬盘序号。
本发明公开了一种分布式硬盘管理系统，包括：获取模块，用于获取与多个分布式硬盘连接的服务集群，其中，所述服务集群包括主服务以及监听服务；生成模块，用于获取所述监听服务对应的监听服务ID，基于所述监听服务ID生成各监听硬盘对应的硬件ID，其中，所述监听硬盘包括至少一个分布式硬盘；监听模块，用于利用所述监听服务对所述监听硬盘进行监听，根据监听结果和所述硬件ID生成所述监听硬盘对应的监听硬盘表；更新模块，用于利用所述主服务获取所述分布式硬盘对应的总硬盘表，并根据所述监听硬盘表更新所述总硬盘表。
本发明公开了一种电子设备，包括：处理器及存储器；所述存储器用于存储计算机程序，所述处理器用于执行所述存储器存储的计算机程序，以使所述电子设备执行上述的方法。
本发明公开了一种计算机可读存储介质，其上存储有计算机程序：所述计算机程序被处理器执行时实现上述的方法。
本发明的有益效果：
获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表。这样，通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。
附图说明
图1是本发明实施例中一个分布式硬盘管理方法的流程示意图；
图2是本发明实施例中一个分布式硬盘管理方法实施系统的结构示意图；
图3是本发明实施例中一个分布式硬盘管理系统的结构示意图；
图4是本发明实施例中一个电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的子样本可以相互组合。
需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
在下文描述中，探讨了大量细节，以提供对本发明实施例的更透彻的解释，然而，对本领域技术人员来说，可以在没有这些具体细节的情况下实施本发明的实施例是显而易见的，在其他实施例中，以方框图的形式而不是以细节的形式来示出公知的结构和设备，以避免使本发明的实施例难以理解。
本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开实施例的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含。
除非另有说明，术语“多个”表示两个或两个以上。
本公开实施例中，字符“/”表示前后对象是一种“或”的关系。例如，A/B表示：A或B。
术语“和/或”是一种描述对象的关联关系，表示可以存在三种关系。例如，A和/或B，表示：A或B，或，A和B这三种关系。
结合图1所示，本公开实施例提供了一种分布式硬盘管理方法，包括：
步骤S101，获取与多个分布式硬盘连接的服务集群；
其中，服务集群包括主服务以及监听服务；
步骤S102，获取监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID；
其中，监听硬盘包括至少一个分布式硬盘；
步骤S103，利用监听服务对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表；
步骤S104，利用主服务获取分布式硬盘对应的总硬盘表，并根据监听硬盘表更新总硬盘表。
采用本公开实施例提供的分布式硬盘管理方法，获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表。这样，通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。
可选地，通过以下方式获取服务集群：获取服务器端与数据库端，建立服务器端与数据库端之间的连接，其中，数据库端包括多个分布式硬盘，服务器端包括多个元数据服务和多个总控服务；根据预设的集群信息配置元数据服务和总控服务，将任一元数据服务确定为主服务，并将至少一部分总控服务确定为监听服务；建立主服务与监听服务之间的连接，得到包括主服务与监听服务在内的服务集群。
可选地，数据库端包括分布式数据库，服务器端和数据库端分别包括服务器、计算机、智能手机、平板电脑、笔记本中的至少一种。
可选地，数据库端还包括多个数据库服务器，数据库服务器连接有至少一个分布式硬盘；各总控服务通过任一数据库服务器与至少一个分布式硬盘连接，总控服务通过数据库服务器连接的分布式硬盘的数量最小单位为个，例如，一个、三个、五个等。
在一些实施例中，元数据服务包括MD(Metadata，元数据)server进程，总控服务包括PD(Placement Driver，总控)server进程，其中，PD server进程是一个管理模块，用于管理分布式数据库的I/O(input/output，输入/输出)端口。
可选地，根据预设的集群信息配置元数据服务和总控服务之前，该方法还包括：在服务器端安装分布式存储系统软件。
可选地，集群信息包括监听服务ID、服务进程配置信息、集群名称等中的一种或多种。
可选地，建立主服务与监听服务之间的连接，包括：主服务分配虚拟IP(InternetProtocol，网际互连协议)地址；监听服务建立该虚拟IP地址对应的TCP(TransmissionControl Protocol，传输控制协议)连接。
可选地，获取监听服务对应的监听服务ID，包括：监听服务根据预设的状态ID确定监听服务是否处于初始化状态；若监听服务处于初始化状态，则监听服务发送监听服务ID请求至主服务，触发主服务根据集群信息确定监听服务与主服务是否属于同一集群；若监听服务与主服务属于同一集群，则主服务对监听服务分配监听服务ID，发送监听服务ID至监听服务；若监听服务与主服务不属于同一集群，则向监听服务返回请求失败；若监听服务不处于初始化状态，则将状态ID确定为监听服务对应的监听服务ID。
这样，由主服务分配用于标识监听服务或数据库服务器的监听服务ID，该监听服务ID不记录在数据库端，而是由监听服务进行存储，进而通过监听服务管理单个数据库服务器对应的分布式硬盘，通过主服务管理所有的分布式硬盘，降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。
可选地，若监听服务的监听服务ID丢失，则该监听服务发送监听服务ID请求至主服务，触发主服务根据集群信息确定监听服务与主服务是否属于同一集群；若监听服务与主服务属于同一集群，则主服务对监听服务分配监听服务ID，发送监听服务ID至监听服务。
在一些实施例中，若监听服务的状态ID为0，则监听服务向主服务发送监听服务ID请求；主服务对比自身与监听服务的集群名称是否相同，若相同，则说明监听服务的监听服务ID手动添加在集群信息中，主服务对监听服务分配监听服务ID，发送监听服务ID至监听服务，若不同，则说明监听服务的监听服务ID未手动添加在集群信息，主服务与监听服务不在同一服务集群，主服务向监听服务返回请求失败；若监听服务的状态ID不为0，则说明监听服务使用了旧的集群信息，将状态ID作为集群信息。
可选地，基于监听服务ID生成各监听硬盘对应的硬件ID，包括：对各监听硬盘进行编号，得到各监听硬盘对应的硬盘序号；分别生成各监听硬盘对应的硬件ID，其中，监听硬盘的硬件ID包括监听服务对应的监听服务ID，以及监听硬盘对应的硬盘序号。
在一些实施例中，各监听硬盘的硬盘序号依次递增。
可选地，通过以下规则生成监听硬盘对应的硬件ID：将监听服务ID左移16位，并将左移后的监听服务ID作为第一字段，将硬盘序号确定为第二字段；将第一字段和第二字段进行组合，得到监听硬盘对应的硬件ID，例如，(监听服务ID)<<16|(硬盘序号)。
可选地，利用监听服务对监听硬盘进行监听，包括：监听服务基于Netlink(套接字)建立与各监听硬盘之间的监听连接；通过监听连接对各监听硬盘进行监听。
可选地，主服务通过以下方法获取总硬盘表：主服务对各分布式硬盘分配名称ID，并将各分布式硬盘对应的硬盘状态信息确定为离线状态；根据名称ID和硬盘状态信息生成分布式硬盘对应的总硬盘表。
可选地，该方法还包括：主服务根据各数据库服务器生成总服务器表。
可选地，监听硬盘表包括各硬件ID对应的当前状态信息，总硬盘表包括各名称ID对应的硬盘状态信息。
这样，硬件ID通过监听服务ID和硬盘序号组成，硬件ID用于监听服务标识分布式硬盘的物理信息，名称ID用于主服务标识文件存储的寻址地址，将硬盘在硬件管理和文件管理中分离开来，进而便于分布式硬盘的快速添加、踢盘、漂移。
在一些实施例中，主服务给每个分布式硬盘分配名称ID，此时，分布式硬盘的硬盘状态信息为离线状态，主服务等待监听服务上传监听硬盘表；若主服务接收到监听服务上传的监听硬盘表，根据监听硬盘表将名称ID对应的硬盘状态信息更新为在线状态或离线状态。
可选地，主服务根据监听硬盘表更新预设的总硬盘表之后，该方法还包括：主服务将更新后的总硬盘表确定为新的总硬盘表；每经过第一预设时间段，监听服务生成监听硬盘表，将生成的监听硬盘表发送至主服务，其中，监听硬盘表包括监听版本信息，以及各监听硬盘对应的当前硬盘状态；若主服务在第二预设时间段之内接收到监听服务发送的监听硬盘表，则获取监听服务对应的历史版本信息，将监听版本信息和历史版本信息进行比较；若比较结果为相同，则不更新总硬盘表；若比较结果为不同，则基于当前硬盘状态，更新总硬盘表中各监听硬盘对应的硬盘状态信息，并基于监听版本信息更新监听服务对应的历史版本信息；若主服务在第二预设时间段之内未接收到监听服务发送的监听硬盘表，则将总硬盘表中各监听硬盘对应的硬盘状态信息确定为离线状态。
这样，监听服务将第一预设时间段后生成的监听硬盘表发送给主服务，触发主服务根据监听硬盘表实时更新总硬盘表，具有时效性，不仅实现了对分布式硬盘的管理，而且提高了管理效率。
可选地，第一预设时间段包括0.5-2s，第二预设时间段包括5-10s。
可选地，监听服务将生成的监听硬盘表发送至主服务的同时，发送监听服务对应的集群名称至主服务；若主服务的集群名称和监听服务的集群名称不同，则说明主服务和监听服务不在同一服务集群，主服务忽略该监听服务发送的监听硬盘表。
在一些实施例中，元数据服务启动时竞选主服务，主服务从分布式数据库加载数据库服务器和分布式硬盘的配置信息，生成总服务器表和总硬盘表；监听服务启动后，向主服务发送监听硬盘表；主服务根据监听硬盘表更新总服务器表和总硬盘表；监听服务每隔1s向主服务发送监听硬盘表；若监听硬盘表的监听版本信息与历史版本信息不同，则主服务更新总服务器表和总硬盘表，否则不更新；若主服务在5s内未接收到监听服务上传的监听硬盘表，则将总硬盘表中监听服务连接的监听硬盘设置为离线状态；若主服务再次接收到监听服务上传的监听硬盘表，则继续更新总服务器表和总硬盘表；在删除硬盘或硬盘漂移的情况下，主服务更新总服务器表和总硬盘表。
可选地，利用主服务获取分布式硬盘对应的总硬盘表之后，该方法还包括：分布式硬盘包括多个硬盘数据块以及各硬盘数据块对应的数据块ID；若主服务接收到目标数据块对应的数据块申请请求，生成目标数据块对应的数据块地址，其中，目标数据块为任一硬盘数据块，数据块地址包括目标数据块所在分布式硬盘的名称ID，以及目标数据块对应的数据块ID；若主服务接收到目标地址对应的数据块访问请求，则将目标地址中名称ID对应的硬件ID确定为目标ID，在目标ID对应的分布式硬盘中，对目标地址中数据块ID对应的硬盘数据块进行访问，其中，目标地址为任一数据块地址。
在一些实施例中，申请文件数据块时，分配的数据块地址由名称ID和数据块ID来标识；文件数据块在数据库中记录的硬盘ID只有名称ID，没有硬件ID，名称ID是文件的唯一寻址ID；申请数据块后，写入数据到名称ID对应硬件ID的硬盘的数据块上。
在一些实施例中，访问文件数据块时，先根据名称ID查到硬盘信息，获取硬盘的硬件ID，并到硬件ID对应的硬盘上读取数据。
可选地，利用主服务获取分布式硬盘对应的总硬盘表之后，该方法还包括：若主服务接收到待删除硬盘对应的硬盘删除指令，则主服务从总硬盘表中删除待删除硬盘对应的状态信息，其中，待删除硬盘为任一分布式硬盘；从数据库端中删除待删除硬盘对应的硬盘配置信息，并将待删除硬盘对应的名称ID加入预设的硬盘删除表中。
在一些实施例中，将待删除硬盘对应的名称ID加入预设的硬盘删除表中，便于在其他流程中使用硬盘删除表，例如数据恢复，并在数据恢复后，从硬盘删除表删除该名称ID。
可选地，利用主服务获取分布式硬盘对应的总硬盘表之后，该方法还包括：若主服务接收到待删除服务对应的服务删除指令，则主服务从总硬盘表中删除待删除服务对应的所有监听硬盘，其中，待删除服务为任一监听服务；从数据库端中删除待删除服务对应的硬盘配置信息；从服务集群中删除待删除服务。
可选地，利用主服务获取分布式硬盘对应的总硬盘表之后，该方法还包括：若监听服务包括多个，将任意两个监听服务分别作为第一服务和第二服务，将第一服务对应的任一监听硬盘确定为第一硬盘；若第一服务无法连接到第一硬盘，则第一服务生成第一硬盘表，将第一硬盘表发送至主服务，其中，第一硬盘表的第一硬盘对应的当前硬盘状态为离线状态；主服务接收到第一硬盘表，根据第一硬盘表将总硬盘表中的第一硬盘对应的硬盘状态信息确定为离线状态；若第二服务连接到第一硬盘，则第二服务生成第二硬盘表，将第二硬盘表发送至主服务，其中，第二硬盘表的第一硬盘对应的当前硬盘状态为上线状态；主服务接收到第二硬盘表，根据第二硬盘表将总硬盘表中的第一硬盘对应的硬盘状态信息确定为上线状态，并根据第二服务对应的监听服务ID更新第一硬盘对应的硬件ID。
这样，在将第一硬盘从第一服务对应的数据库服务器上卸载，并插入到第二服务对应的数据库服务器上的情况下，主服务根据总硬盘表和硬件ID进而通过固定的名称ID查找对应的硬件ID，不仅实现了分布式硬盘的漂移，而且实现了分布式磁盘的动态寻址，相较于寻找固定地址，提高了分布式硬盘管理的灵活性。
如图2所示，本公开实施例提供了一种分布式硬盘管理方法实施系统，包括服务器端201和数据库端202，其中，服务器端201包括多个元数据服务2011和多个总控服务2012，数据库端202包括多个数据库服务器2021和各数据库服务器连接的一个或多个分布式硬盘2022；各总控服务通过一数据库服务器与分布式硬盘连接；从元数据服务中竞选出主服务2013，并将总控服务确定为监听服务；建立主服务与各数据库服务器之间的连接，并建立主服务与各监听服务之间的连接；监听服务用于获取监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表；主服务用于对各分布式硬盘分配名称ID，并将各分布式硬盘对应的硬盘状态信息确定为离线状态，根据名称ID和硬盘状态信息生成分布式硬盘对应的总硬盘表，根据监听硬盘表更新总硬盘表。
采用本公开实施例提供的分布式硬盘管理方法，获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表，具有如下优点：
第一、通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理；
第二、由主服务分配用于标识监听服务或数据库服务器的监听服务ID，该监听服务ID不记录在数据库端，而是由监听服务进行存储，进而通过监听服务管理单个数据库服务器对应的分布式硬盘，通过主服务管理所有的分布式硬盘，降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理；
第三、硬件ID通过监听服务ID和硬盘序号组成，硬件ID用于监听服务标识分布式硬盘的物理信息，通过主服务生成分布式硬盘对应的名称ID，名称ID用于主服务标识文件存储的寻址地址，将硬盘在硬件管理和文件管理中分离开来，进而便于分布式硬盘的快速添加、踢盘、漂移；
第四、监听服务将第一预设时间段后生成的监听硬盘表发送给主服务，触发主服务根据监听硬盘表实时更新总硬盘表，具有时效性，不仅实现了对分布式硬盘的管理，而且提高了管理效率；
第五、在将第一硬盘从第一服务对应的数据库服务器上卸载，并插入到第二服务对应的数据库服务器上的情况下，主服务根据总硬盘表和硬件ID进而通过固定的名称ID查找对应的硬件ID，不仅实现了分布式硬盘的漂移，而且实现了分布式磁盘的动态寻址，相较于寻找固定地址，提高了分布式硬盘管理的灵活性。
结合图3所示，本公开实施例提供了种分布式硬盘管理系统，包括获取模块301、生成模块302、监听模块303和更新模块304；获取模块301用于获取与多个分布式硬盘连接的服务集群，其中，服务集群包括主服务以及监听服务；生成模块302用于获取监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，其中，监听硬盘包括至少一个分布式硬盘；监听模块303用于利用监听服务对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表；更新模块304用于利用主服务获取分布式硬盘对应的总硬盘表，并根据监听硬盘表更新总硬盘表。
采用本公开实施例提供的分布式硬盘管理系统，获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表。这样，通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。
结合图4所示，本公开实施例提供了一种电子设备，包括：处理器(processor)400及存储器(memory)401；存储器用于存储计算机程序，处理器用于执行存储器存储的计算机程序，以使终端执行本实施例中任一项方法。可选地，该电子设备还可以包括通信接口(Communication Interface)402和总线403。其中，处理器400、通信接口402、存储器401可以通过总线403完成相互间的通信。通信接口402可以用于信息传输。处理器400可以调用存储器401中的逻辑指令，以执行上述实施例中的方法。
此外，上述的存储器401中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。
存储器401作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本公开实施例中的方法对应的程序指令/模块。处理器400通过运行存储在存储器401中的程序指令/模块，从而执行功能应用以及数据处理，即实现上述实施例中的方法。
存储器401可包括存储程序区和数据库文件区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；数据库文件区可存储根据终端设备的使用所创建的数据等。此外，存储器401可以包括高速随机存取存储器，还可以包括非说易失性存储器。
采用本公开实施例提供的电子设备，获取与多个分布式硬盘连接的服务集群，获取服务集群中的监听服务对应的监听服务ID，基于监听服务ID生成各监听硬盘对应的硬件ID，并对监听硬盘进行监听，根据监听结果和硬件ID生成监听硬盘对应的监听硬盘表，通过服务集群中的主服务根据监听硬盘表更新分布式硬盘对应的总硬盘表。这样，通过监听服务ID标识监听服务，根据包括监听服务ID的硬件ID标识分布式硬盘的物理信息，并根据监听服务的监听硬盘表更新主服务的总硬盘表，简化了分布式硬盘的标识分配规则，并降低了服务器与分布式硬盘之间的耦合度，便于对分布式硬盘进行管理。
本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本实施例中的任一项方法。
本公开实施例中的计算机可读存储介质，本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过计算机程序相关的硬件来完成。前述的计算机程序可以存储于一计算机可读存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
本实施例公开的电子设备，包括处理器、存储器、收发器和通信接口，存储器和通信接口与处理器和收发器连接并完成相互间的通信，存储器用于存储计算机程序，通信接口用于进行通信，处理器和收发器用于运行计算机程序，使电子设备执行如上方法的各个步骤。
在本实施例中，存储器可能包含随机存取存储器(Random Access Memory，简称RAM)，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、图形处理器(Graphics Processing Unit，简称GPU)，网络处理器(NetworkProcessor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application Specific Integrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
以上描述和附图充分地示出了本公开的实施例，以使本领域的技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的部件和功能是可选地，并且操作的顺序可以变化。一些实施例的部分和子样本可以被包括在或替换其他实施例的部分和子样本。而且，本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的，除非上下文清楚地表明，否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地，如在本申请中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外，当用于本申请中时，术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的子样本、整体、步骤、操作、元素，和/或组件的存在，但不排除一个或一个以上其它子样本、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下，由语句“包括一个…”限定的要素，并不排除在包括所述要素的过程、方法或者设备中还存在另外的相同要素。本文中，每个实施例重点说明的可以是与其他实施例的不同之处，各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言，如果其与实施例公开的方法部分相对应，那么相关之处可以参见方法部分的描述。
本领域技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，可以取决于技术方案的特定应用和设计约束条件。所述技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能，但是这种实现不应认为超出本公开实施例的范围。所述技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本文所披露的实施例中，所揭露的方法、产品(包括但不限于装置、设备等)，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，可以仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些子样本可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外，在本公开实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中，不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生，有时不同的操作或步骤之间不存在特定的顺序。例如，两个连续的操作或步骤实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

Claims (12)

1.一种分布式硬盘管理方法，其特征在于，包括：
获取与多个分布式硬盘连接的服务集群，其中，所述服务集群包括主服务以及监听服务；
获取所述监听服务对应的监听服务ID，基于所述监听服务ID生成各监听硬盘对应的硬件ID，其中，所述监听硬盘包括至少一个分布式硬盘；
利用所述监听服务对所述监听硬盘进行监听，根据监听结果和所述硬件ID生成所述监听硬盘对应的监听硬盘表；
利用所述主服务获取所述分布式硬盘对应的总硬盘表，并根据所述监听硬盘表更新所述总硬盘表。
2.根据权利要求1所述的方法，其特征在于，所述主服务通过以下方法获取总硬盘表：
所述主服务对各所述分布式硬盘分配名称ID，并将各所述分布式硬盘对应的硬盘状态信息确定为离线状态；
根据所述名称ID和所述硬盘状态信息生成所述分布式硬盘对应的总硬盘表。
3.根据权利要求2所述的方法，其特征在于，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：
所述分布式硬盘包括多个硬盘数据块以及各所述硬盘数据块对应的数据块ID；
若所述主服务接收到目标数据块对应的数据块申请请求，生成所述目标数据块对应的数据块地址，其中，所述目标数据块为任一所述硬盘数据块，所述数据块地址包括所述目标数据块所在分布式硬盘的名称ID，以及所述目标数据块对应的数据块ID；
若所述主服务接收到目标地址对应的数据块访问请求，则将所述目标地址中名称ID对应的硬件ID确定为目标ID，在所述目标ID对应的分布式硬盘中，对所述目标地址中数据块ID对应的硬盘数据块进行访问，其中，所述目标地址为任一数据块地址。
4.根据权利要求2所述的方法，其特征在于，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：
若所述主服务接收到待删除硬盘对应的硬盘删除指令，则所述主服务从所述总硬盘表中删除所述待删除硬盘对应的状态信息，其中，所述待删除硬盘为任一分布式硬盘；
从所述数据库端中删除所述待删除硬盘对应的硬盘配置信息，并将所述待删除硬盘对应的名称ID加入预设的硬盘删除表中。
5.根据权利要求2所述的方法，其特征在于，利用所述主服务获取所述分布式硬盘对应的总硬盘表之后，所述方法还包括：
若所述监听服务包括多个，将任意两个监听服务分别作为第一服务和第二服务，将所述第一服务对应的任一监听硬盘确定为第一硬盘；
若所述第一服务无法连接到所述第一硬盘，则所述第一服务生成第一硬盘表，将所述第一硬盘表发送至所述主服务，其中，所述第一硬盘表的第一硬盘对应的当前硬盘状态为离线状态；
所述主服务接收到所述第一硬盘表，根据所述第一硬盘表将所述总硬盘表中的第一硬盘对应的硬盘状态信息确定为离线状态；
若所述第二服务连接到所述第一硬盘，则所述第二服务生成第二硬盘表，将所述第二硬盘表发送至所述主服务，其中，所述第二硬盘表的第一硬盘对应的当前硬盘状态为上线状态；
所述主服务接收到所述第二硬盘表，根据所述第二硬盘表将所述总硬盘表中的第一硬盘对应的硬盘状态信息确定为上线状态，并根据所述第二服务对应的监听服务ID更新所述第一硬盘对应的硬件ID。
6.根据权利要求1所述的方法，其特征在于，所述主服务根据所述监听硬盘表更新预设的总硬盘表之后，所述方法还包括：
所述主服务将更新后的总硬盘表确定为新的总硬盘表；
每经过第一预设时间段，所述监听服务生成监听硬盘表，将生成的监听硬盘表发送至所述主服务，其中，所述监听硬盘表包括监听版本信息，以及各所述监听硬盘对应的当前硬盘状态；
若所述主服务在第二预设时间段之内接收到所述监听服务发送的监听硬盘表，则获取所述监听服务对应的历史版本信息，将所述监听版本信息和所述历史版本信息进行比较；
若比较结果为相同，则不更新总硬盘表；
若比较结果为不同，则基于所述当前硬盘状态，更新所述总硬盘表中各所述监听硬盘对应的硬盘状态信息，并基于所述监听版本信息更新所述监听服务对应的历史版本信息；
若所述主服务在第二预设时间段之内未接收到所述监听服务发送的监听硬盘表，则将所述总硬盘表中各所述监听硬盘对应的硬盘状态信息确定为离线状态。
7.根据权利要求1至6任一项所述的方法，其特征在于，通过以下方式获取服务集群：
获取服务器端与数据库端，建立所述服务器端与所述数据库端之间的连接，其中，所述数据库端包括多个分布式硬盘，所述服务器端包括多个元数据服务和多个总控服务；
根据预设的集群信息配置所述元数据服务和所述总控服务，将任一元数据服务确定为主服务，并将至少一部分所述总控服务确定为监听服务；
建立所述主服务与所述监听服务之间的连接，得到包括所述主服务与所述监听服务在内的服务集群。
8.根据权利要求7所述的方法，其特征在于，获取所述监听服务对应的监听服务ID，包括：
所述监听服务根据预设的状态ID确定所述监听服务是否处于初始化状态；
若所述监听服务处于初始化状态，则所述监听服务发送监听服务ID请求至所述主服务，触发所述主服务根据所述集群信息确定所述监听服务与所述主服务是否属于同一集群；
若所述监听服务与所述主服务属于同一集群，则所述主服务对所述监听服务分配监听服务ID，发送所述监听服务ID至所述监听服务；
若所述监听服务与所述主服务不属于同一集群，则向所述监听服务返回请求失败；
若所述监听服务不处于初始化状态，则将所述状态ID确定为所述监听服务对应的监听服务ID。
9.根据权利要求7所述的方法，其特征在于，基于所述监听服务ID生成各监听硬盘对应的硬件ID，包括：
对各所述监听硬盘进行编号，得到各所述监听硬盘对应的硬盘序号；
分别生成各所述监听硬盘对应的硬件ID，其中，所述监听硬盘的硬件ID包括所述监听服务对应的监听服务ID，以及所述监听硬盘对应的硬盘序号。
10.一种分布式硬盘管理系统，其特征在于，包括：
获取模块，用于获取与多个分布式硬盘连接的服务集群，其中，所述服务集群包括主服务以及监听服务；
生成模块，用于获取所述监听服务对应的监听服务ID，基于所述监听服务ID生成各监听硬盘对应的硬件ID，其中，所述监听硬盘包括至少一个分布式硬盘；
监听模块，用于利用所述监听服务对所述监听硬盘进行监听，根据监听结果和所述硬件ID生成所述监听硬盘对应的监听硬盘表；
更新模块，用于利用所述主服务获取所述分布式硬盘对应的总硬盘表，并根据所述监听硬盘表更新所述总硬盘表。
11.一种电子设备，其特征在于，包括：处理器及存储器；
所述存储器用于存储计算机程序，所述处理器用于执行所述存储器存储的计算机程序，以使所述电子设备执行如权利要求1至9任一项所述的方法。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于：
所述计算机程序被处理器执行时实现如权利要求1至9任一项所述的方法。
CN202210513901.5A 2022-05-11 2022-05-11 分布式硬盘管理方法、系统、电子设备及可读存储介质 Pending CN114968095A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210513901.5A CN114968095A (zh) 2022-05-11 2022-05-11 分布式硬盘管理方法、系统、电子设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210513901.5A CN114968095A (zh) 2022-05-11 2022-05-11 分布式硬盘管理方法、系统、电子设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN114968095A true CN114968095A (zh) 2022-08-30

Family

ID=82982101

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210513901.5A Pending CN114968095A (zh) 2022-05-11 2022-05-11 分布式硬盘管理方法、系统、电子设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN114968095A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116360711A (zh) * 2023-06-02 2023-06-30 杭州沃趣科技股份有限公司 一种分布式存储处理方法、装置、设备及介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116360711A (zh) * 2023-06-02 2023-06-30 杭州沃趣科技股份有限公司 一种分布式存储处理方法、装置、设备及介质
CN116360711B (zh) * 2023-06-02 2023-08-11 杭州沃趣科技股份有限公司 一种分布式存储处理方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN110799960B (zh) 数据库租户迁移的系统和方法
US7788303B2 (en) Systems and methods for distributed system scanning
JP6553822B2 (ja) 分散システムにおける範囲の分割および移動
US10002148B2 (en) Memory-aware joins based in a database cluster
US7325041B2 (en) File distribution system in which partial files are arranged according to various allocation rules associated with a plurality of file types
CN100399327C (zh) 管理文件系统的逻辑版本的方法和数据存储系统
US8140625B2 (en) Method for operating a fixed prefix peer to peer network
US7430570B1 (en) Shadow directory structure in a distributed segmented file system
CN100555279C (zh) 不用快照的项同步系统和方法
US8285677B2 (en) Method and apparatus for propagating tables while preserving cyclic foreign key relationships
CN111427841A (zh) 数据管理方法、装置、计算机设备和存储介质
CN101268439A (zh) 数据库片段克隆和管理
CN111917834A (zh) 一种数据同步方法、装置、存储介质及计算机设备
US8099525B2 (en) Method and apparatus for controlling access to logical units
CN111651424B (zh) 一种数据处理方法、装置、数据节点及存储介质
US10430341B2 (en) Log-structured storage method and server
CN116701330A (zh) 物流信息共享方法、装置、设备及存储介质
CN114968095A (zh) 分布式硬盘管理方法、系统、电子设备及可读存储介质
CN107908713B (zh) 一种基于Redis集群的分布式动态杜鹃过滤系统及其过滤方法
JP4362839B1 (ja) 仮想単一メモリストレージ上におけるメタ情報共有型分散データベース・システム
US11119862B2 (en) Delta information volumes to enable chained replication of data by uploading snapshots of data to cloud
CN111274004A (zh) 进程实例管理方法、装置及计算机存储介质
CN111428114A (zh) Elasticsearch搜索引擎的索引创建方法及装置
US20150100545A1 (en) Distributed database system and a non-transitory computer readable medium
CN111565211B (zh) 一种cdn配置分发网络系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination