CN107920131A - 一种hdfs存储系统的元数据管理方法及装置 - Google Patents
一种hdfs存储系统的元数据管理方法及装置 Download PDFInfo
- Publication number
- CN107920131A CN107920131A CN201711293984.7A CN201711293984A CN107920131A CN 107920131 A CN107920131 A CN 107920131A CN 201711293984 A CN201711293984 A CN 201711293984A CN 107920131 A CN107920131 A CN 107920131A
- Authority
- CN
- China
- Prior art keywords
- metadata
- service request
- storage systems
- metadata information
- hdfs storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/561—Adding application-functional data or data for application control, e.g. adding metadata
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种HDFS存储系统的元数据管理方法,应用于HDFS存储系统的第一管理节点,HDFS存储系统包含多个共享同一元数据信息池的管理节点,第一管理节点为HDFS存储系统包含的多个管理节点中的任意一个,该方法可以包括以下步骤:接收客户端针对目标元数据的服务请求;基于元数据信息池,响应服务请求。应用本发明实施例所提供的技术方案,多个管理节点共享同一元数据信息池,可以避免出现数据不一致问题,多个管理节点同时对外提供服务,可以避免出现单个管理节点负载过重问题,使得HDFS存储系统能够长久处于高可用状态,提升了存储性能。本发明还公开了一种HDFS存储系统的元数据管理装置,具有相应技术效果。
Description
技术领域
本发明涉及计算机存储技术领域,特别是涉及一种HDFS存储系统的元数据管理方法及装置。
背景技术
随着计算机技术的快速发展,大数据应用越来越广泛,对存储的性能要求越来越高。HDFS(Hadoop Distributed File System,Hadoop分布式文件系统)为一种分布式统一存储系统,是大数据处理Hadoop的存储组件。
目前,在HDFS存储系统中,多是基于主从模式配置两个管理节点,即主管理节点和从管理节点,管理节点也可称为NameNode。同一时间,主管理节点负责大数据的数据存储服务,其操作过程记录在日志中,按照一定的时间间隔进行日志的导出。如果主管理节点出现问题,从管理节点会读取日志,接管主管理节点的服务,变成主管理节点。
这种方法存在一定的缺点,因为日志是按照一定的时间间隔导出的,主管理节点出现问题之前的一小段时间的操作过程可能并未被记录,存在数据丢失与不一致的问题,而且,同一时间只有一个管理节点对外提供服务,很容易因负载过重导致管理节点出现异常,使得HDFS存储系统处于不可用状态,影响存储性能。
发明内容
本发明的目的是提供一种HDFS存储系统的元数据管理方法及装置,以避免出现数据不一致问题,及避免出现单个管理节点负载过重问题,使得HDFS存储系统处于高可用状态,提升存储性能。
为解决上述技术问题,本发明提供如下技术方案:
一种HDFS存储系统的元数据管理方法,应用于HDFS存储系统的第一管理节点,所述HDFS存储系统包含多个共享同一元数据信息池的管理节点,所述第一管理节点为所述HDFS存储系统包含的多个管理节点中的任意一个,所述方法包括:
接收客户端针对目标元数据的服务请求;
基于所述元数据信息池,响应所述服务请求。
在本发明的一种具体实施方式中,所述基于所述元数据信息池,响应所述服务请求,包括:
如果所述服务请求为写入请求,则将所述目标元数据写入至所述元数据信息池中。
在本发明的一种具体实施方式中,所述基于所述元数据信息池,响应所述服务请求,包括:
如果所述服务请求为读取请求,则从所述元数据信息池中读取所述目标元数据。
在本发明的一种具体实施方式中,在所述从所述元数据信息池中读取所述目标元数据之前,还包括:
利用paxos协议对所述元数据信息池中的元数据信息进行一致性检测;
确定一致性检测是否通过;
如果是,则执行所述从所述元数据信息池中读取所述目标元数据的步骤。
在本发明的一种具体实施方式中,在确定一致性检测未通过时,还包括:
输出告警信息。
一种HDFS存储系统的元数据管理装置,应用于HDFS存储系统的第一管理节点,所述HDFS存储系统包含多个共享同一元数据信息池的管理节点,所述第一管理节点为所述HDFS存储系统包含的多个管理节点中的任意一个,所述装置包括:
服务请求接收模块,用于接收客户端针对目标元数据的服务请求;
服务请求响应模块,用于基于所述元数据信息池,响应所述服务请求。
在本发明的一种具体实施方式中,所述服务请求响应模块,具体用于:
如果所述服务请求为写入请求,则将所述目标元数据写入至所述元数据信息池中。
在本发明的一种具体实施方式中,所述服务请求响应模块,具体用于:
如果所述服务请求为读取请求,则从所述元数据信息池中读取所述目标元数据。
在本发明的一种具体实施方式中,还包括一致性检测模块,用于:
在所述从所述元数据信息池中读取所述目标元数据之前,利用paxos协议对所述元数据信息池中的元数据信息进行一致性检测;
确定一致性检测是否通过;
如果是,则触发所述服务请求响应模块执行所述从所述元数据信息池中读取所述目标元数据的步骤。
在本发明的一种具体实施方式中,还包括告警信息输出模块,用于:
在确定一致性检测未通过时,输出告警信息。
应用本发明实施例所提供的技术方案,HDFS存储系统包含多个管理节点,同时对外提供服务,且多个管理节点共享同一元数据信息池,其中任意一个管理节点在接收到客户端针对目标元数据的服务请求时,基于元数据信息池,响应该服务请求。多个管理节点共享同一元数据信息池,可以避免出现数据不一致问题,多个管理节点同时对外提供服务,可以避免出现单个管理节点负载过重问题,使得HDFS存储系统能够长久处于高可用状态,提升了存储性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中一种HDFS存储系统的结构示意图;
图2为本发明实施例中一种HDFS存储系统的元数据管理方法的实施流程图;
图3为本发明实施例中一种HDFS存储系统的元数据管理装置的结构示意图。
具体实施方式
本发明的核心是提供一种HDFS存储系统的元数据管理方法,该方法可以应用于HDFS存储系统的第一管理节点,HDFS存储系统包含多个共享同一元数据信息池的管理节点,第一管理节点为HDFS存储系统包含的多个管理节点中的任意一个。
如图1所示,为本发明实施例所提供的一种HDFS存储系统的一种结构示意图,HDFS存储系统包括多个管理节点NameNode,多个管理节点共享同一元数据信息池,均可与客户端Client连接,可以同时对外提供服务,HDFS存储系统中的任意一个管理节点在接收到客户端针对目标元数据的服务请求时,可以基于元数据信息池,响应服务请求,并通过数据节点DataNode访问目标元数据对应的目标数据。当某个管理节点出现问题时,其服务可自动切换到其他管理节点上。
具体的,基于协议限制,HDFS存储系统中包含的多个管理节点可以为奇数个。
多个管理节点共享同一元数据信息池,可以避免出现数据不一致问题,多个管理节点同时对外提供服务,可以避免出现单个管理节点负载过重问题,使得HDFS存储系统能够长久处于高可用状态,提升了存储性能。
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图2所示,为本发明实施例所提供的一种HDFS存储系统的元数据管理方法的实施流程图,该方法可以包括以下步骤:
S210:接收客户端针对目标元数据的服务请求。
在实际应用中,用户可根据实际需要通过客户端向HDFS存储系统的管理节点发送针对目标元数据的服务请求。在HDFS存储系统中,多个管理节点可同时对外提供服务,避免单一管理节点因负载压力过重出现问题。客户端可以依据预定规则确定向哪个管理节点发送服务请求。比如,可以根据通信代价的大小,向通信代价最小的管理节点发送服务请求,或者,可以根据业务类别、属性等向相应的管理节点发送服务请求,或者,可以随机选择一个管理节点发送服务请求。当然,还可以根据实际情况,设定其他规则,本发明实施例对此不做限制。
第一管理节点为HDFS存储系统包含的多个管理节点中的任意一个,第一管理节点接收到客户端针对目标元数据的服务请求时,可以继续执行步骤S220的操作。
S220:基于元数据信息池,响应服务请求。
在本发明实施例中,HDFS存储系统包含的多个管理节点共享同一元数据信息池,即各个管理节点统一维护一套元数据信息。第一管理节点在接收到客户端针对目标元数据的服务请求时,可以基于元数据信息池,响应服务请求。
在本发明的一种具体实施方式中,如果服务请求为写入请求,则将目标元数据写入至元数据信息池中。
即第一管理节点接收到客户端针对目标元数据的写入请求时,将目标元数据写入至元数据信息池中,更新元数据信息池中相关元数据信息。这样,其他管理节点在对外提供服务时可以获取到元数据信息池中最新的元数据信息。
在本发明的另一种具体实施方式中,如果服务请求为读取请求,则从元数据信息池中读取目标元数据。
即第一管理节点接收到客户端针对目标元数据的读取请求时,可以从元数据信息池中读取目标元数据。第一管理节点为HDFS存储系统中的任意一个管理节点,每个管理节点在接收到相应的客户端发送的针对元数据的写入请求时,都可以将相应的元数据写入至元数据信息池中,更新元数据信息池中的相关元数据信息。第一管理节点接收到客户端发送的针对目标元数据的服务请求为读取请求时,可以从元数据信息池中获取到最新的相关元数据信息,读取到最新的目标元数据。这样可以避免为客户端提供错误信息,提高存储性能。
在本发明的一个实施例中,在从元数据信息池中读取目标元数据之前,该方法还可以包括以下步骤:
步骤一:利用paxos协议对元数据信息池中的元数据信息进行一致性检测;
步骤二:确定一致性检测是否通过,如果是,则执行从元数据信息池中读取目标元数据的步骤。
为便于描述,将上述两个步骤结合起来进行说明。
第一管理节点接收到客户端针对目标元数据的读取请求时,可以先利用paxos协议对元数据信息池中的元数据信息进行一致性检测。paxos协议为一种消息一致性算法,用于保证分布式存储系统中某个值是一定的。
具体的,HDFS存储系统的每个管理节点可以通过paxos协议协商当前处于工作状态的管理节点有哪些,从而进行元数据信息池中元数据信息的一致性检测。
利用paxos协议对元数据信息池中的元数据信息进行一致性检测,如果确定一致性检测通过,则可以继续执行从元数据信息池中读取目标元数据的步骤,进一步保证读取到最新的元数据,如果确定一致性检测未通过,则可以输出告警信息,如通过日志记录方式输出告警信息,或者通过短信、邮件等方式输出告警信息,以便管理人员及时进行问题排查。
应用本发明实施例所提供的方法,HDFS存储系统包含多个管理节点,同时对外提供服务,且多个管理节点共享同一元数据信息池,其中任意一个管理节点在接收到客户端针对目标元数据的服务请求时,基于元数据信息池,响应该服务请求。多个管理节点共享同一元数据信息池,可以避免出现数据不一致问题,多个管理节点同时对外提供服务,可以避免出现单个管理节点负载过重问题,使得HDFS存储系统能够长久处于高可用状态,提升了存储性能。
相应于上面的方法实施例,本发明实施例还提供了一种HDFS存储系统的元数据管理装置,应用于HDFS存储系统的第一管理节点,HDFS存储系统包含多个共享同一元数据信息池的管理节点,第一管理节点为HDFS存储系统包含的多个管理节点中的任意一个,下文描述的一种HDFS存储系统的元数据管理装置与上文描述的一种HDFS存储系统的元数据管理方法可相互对应参照。
参见图3所示,该装置可以包括以下模块:
服务请求接收模块310,用于接收客户端针对目标元数据的服务请求;
服务请求响应模块320,用于基于元数据信息池,响应服务请求。
应用本发明实施例所提供的装置,HDFS存储系统包含多个管理节点,同时对外提供服务,且多个管理节点共享同一元数据信息池,其中任意一个管理节点在接收到客户端针对目标元数据的服务请求时,基于元数据信息池,响应该服务请求。多个管理节点共享同一元数据信息池,可以避免出现数据不一致问题,多个管理节点同时对外提供服务,可以避免出现单个管理节点负载过重问题,使得HDFS存储系统能够长久处于高可用状态,提升了存储性能。
在本发明的一种具体实施方式中,服务请求响应模块320,具体用于:
如果服务请求为写入请求,则将目标元数据写入至元数据信息池中。
在本发明的一种具体实施方式中,服务请求响应模块320,具体用于:
如果服务请求为读取请求,则从元数据信息池中读取目标元数据。
在本发明的一种具体实施方式中,还包括一致性检测模块,用于:
在从元数据信息池中读取目标元数据之前,利用paxos协议对元数据信息池中的元数据信息进行一致性检测;
确定一致性检测是否通过;
如果是,则触发服务请求响应模块320执行从元数据信息池中读取目标元数据的步骤。
在本发明的一种具体实施方式中,还包括告警信息输出模块,用于:
在确定一致性检测未通过时,输出告警信息。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的技术方案及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (10)
1.一种HDFS存储系统的元数据管理方法,其特征在于,应用于HDFS存储系统的第一管理节点,所述HDFS存储系统包含多个共享同一元数据信息池的管理节点,所述第一管理节点为所述HDFS存储系统包含的多个管理节点中的任意一个,所述方法包括:
接收客户端针对目标元数据的服务请求;
基于所述元数据信息池,响应所述服务请求。
2.根据权利要求1所述的方法,其特征在于,所述基于所述元数据信息池,响应所述服务请求,包括:
如果所述服务请求为写入请求,则将所述目标元数据写入至所述元数据信息池中。
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述元数据信息池,响应所述服务请求,包括:
如果所述服务请求为读取请求,则从所述元数据信息池中读取所述目标元数据。
4.根据权利要求3所述的方法,其特征在于,在所述从所述元数据信息池中读取所述目标元数据之前,还包括:
利用paxos协议对所述元数据信息池中的元数据信息进行一致性检测;
确定一致性检测是否通过;
如果是,则执行所述从所述元数据信息池中读取所述目标元数据的步骤。
5.根据权利要求4所述的方法,其特征在于,在确定一致性检测未通过时,还包括:
输出告警信息。
6.一种HDFS存储系统的元数据管理装置,其特征在于,应用于HDFS存储系统的第一管理节点,所述HDFS存储系统包含多个共享同一元数据信息池的管理节点,所述第一管理节点为所述HDFS存储系统包含的多个管理节点中的任意一个,所述装置包括:
服务请求接收模块,用于接收客户端针对目标元数据的服务请求;
服务请求响应模块,用于基于所述元数据信息池,响应所述服务请求。
7.根据权利要求6所述的装置,其特征在于,所述服务请求响应模块,具体用于:
如果所述服务请求为写入请求,则将所述目标元数据写入至所述元数据信息池中。
8.根据权利要求6或7所述的装置,其特征在于,所述服务请求响应模块,具体用于:
如果所述服务请求为读取请求,则从所述元数据信息池中读取所述目标元数据。
9.根据权利要求8所述的装置,其特征在于,还包括一致性检测模块,用于:
在所述从所述元数据信息池中读取所述目标元数据之前,利用paxos协议对所述元数据信息池中的元数据信息进行一致性检测;
确定一致性检测是否通过;
如果是,则触发所述服务请求响应模块执行所述从所述元数据信息池中读取所述目标元数据的步骤。
10.根据权利要求9所述的装置,其特征在于,还包括告警信息输出模块,用于:
在确定一致性检测未通过时,输出告警信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711293984.7A CN107920131A (zh) | 2017-12-08 | 2017-12-08 | 一种hdfs存储系统的元数据管理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711293984.7A CN107920131A (zh) | 2017-12-08 | 2017-12-08 | 一种hdfs存储系统的元数据管理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107920131A true CN107920131A (zh) | 2018-04-17 |
Family
ID=61897345
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711293984.7A Pending CN107920131A (zh) | 2017-12-08 | 2017-12-08 | 一种hdfs存储系统的元数据管理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107920131A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108984635A (zh) * | 2018-06-21 | 2018-12-11 | 郑州云海信息技术有限公司 | 一种hdfs存储系统以及数据存储方法 |
CN111212138A (zh) * | 2019-12-31 | 2020-05-29 | 曙光信息产业(北京)有限公司 | 一种跨站点存储系统及数据信息访问方法 |
CN112925477A (zh) * | 2021-01-28 | 2021-06-08 | 上海商汤智能科技有限公司 | 一种数据处理方法、装置以及存储系统 |
CN116991333A (zh) * | 2023-09-25 | 2023-11-03 | 苏州元脑智能科技有限公司 | 分布式数据存储方法、装置、电子设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102571904A (zh) * | 2011-10-11 | 2012-07-11 | 浪潮电子信息产业股份有限公司 | 一种模块化设计的nas集群系统构建方法 |
KR20130118088A (ko) * | 2012-04-19 | 2013-10-29 | 케이티하이텔 주식회사 | 멀티 메타데이터 서버 구조를 갖는 분산 파일 시스템 및 이를 이용한 데이터 처리 방법 |
CN104484470A (zh) * | 2014-12-31 | 2015-04-01 | 天津南大通用数据技术股份有限公司 | 一种数据库集群元数据管理方法 |
CN105205156A (zh) * | 2015-09-25 | 2015-12-30 | 浪潮(北京)电子信息产业有限公司 | 一种数据管理方法、装置及系统 |
CN105488047A (zh) * | 2014-09-16 | 2016-04-13 | 华为技术有限公司 | 元数据读写方法和装置 |
CN107046474A (zh) * | 2016-12-20 | 2017-08-15 | 东软集团股份有限公司 | 一种服务集群 |
-
2017
- 2017-12-08 CN CN201711293984.7A patent/CN107920131A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102571904A (zh) * | 2011-10-11 | 2012-07-11 | 浪潮电子信息产业股份有限公司 | 一种模块化设计的nas集群系统构建方法 |
KR20130118088A (ko) * | 2012-04-19 | 2013-10-29 | 케이티하이텔 주식회사 | 멀티 메타데이터 서버 구조를 갖는 분산 파일 시스템 및 이를 이용한 데이터 처리 방법 |
CN105488047A (zh) * | 2014-09-16 | 2016-04-13 | 华为技术有限公司 | 元数据读写方法和装置 |
CN104484470A (zh) * | 2014-12-31 | 2015-04-01 | 天津南大通用数据技术股份有限公司 | 一种数据库集群元数据管理方法 |
CN105205156A (zh) * | 2015-09-25 | 2015-12-30 | 浪潮(北京)电子信息产业有限公司 | 一种数据管理方法、装置及系统 |
CN107046474A (zh) * | 2016-12-20 | 2017-08-15 | 东软集团股份有限公司 | 一种服务集群 |
Non-Patent Citations (1)
Title |
---|
崔园: ""基于HDFS的分布式存储系统的研究与实现"", 《中国优秀硕士学位论文全文数据库(信息科技辑)》 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108984635A (zh) * | 2018-06-21 | 2018-12-11 | 郑州云海信息技术有限公司 | 一种hdfs存储系统以及数据存储方法 |
CN111212138A (zh) * | 2019-12-31 | 2020-05-29 | 曙光信息产业(北京)有限公司 | 一种跨站点存储系统及数据信息访问方法 |
CN111212138B (zh) * | 2019-12-31 | 2022-11-22 | 曙光信息产业(北京)有限公司 | 一种跨站点存储系统及数据信息访问方法 |
CN112925477A (zh) * | 2021-01-28 | 2021-06-08 | 上海商汤智能科技有限公司 | 一种数据处理方法、装置以及存储系统 |
CN116991333A (zh) * | 2023-09-25 | 2023-11-03 | 苏州元脑智能科技有限公司 | 分布式数据存储方法、装置、电子设备及存储介质 |
CN116991333B (zh) * | 2023-09-25 | 2024-01-26 | 苏州元脑智能科技有限公司 | 分布式数据存储方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3857373B1 (en) | Blockchain-based resource allocation method and apparatus | |
CN107453896B (zh) | 多重区块链网络数据处理方法、装置及服务器 | |
CN109144414B (zh) | 区块链数据的多级存储方法和装置 | |
TWI753346B (zh) | 基於區塊鏈的房屋資訊存證、應用方法和裝置 | |
CN107920131A (zh) | 一种hdfs存储系统的元数据管理方法及装置 | |
CN109032803B (zh) | 数据处理方法和装置、客户端 | |
CN110673941B (zh) | 多机房中微服务的迁移方法、电子设备及存储介质 | |
CN109376197B (zh) | 一种数据同步方法、服务器及计算机存储介质 | |
CN106446159B (zh) | 一种存储文件的方法、第一虚拟机及名称节点 | |
JP6097880B2 (ja) | ビザンチン故障耐性データ複製を行う方法およびシステム | |
US11176170B2 (en) | Blockchain-based data processing methods and apparatuses and computer devices | |
US20180196603A1 (en) | Memory Management Method, Apparatus, and System | |
KR101545626B1 (ko) | Dds-db 연동 시스템 | |
Adya et al. | Fast key-value stores: An idea whose time has come and gone | |
CN109241186A (zh) | 分布式事务的管理方法、系统、计算机设备及存储介质 | |
CN111767144B (zh) | 交易数据的交易路由确定方法、装置、设备及系统 | |
CN110941676B (zh) | 一种配置方法、装置、设备及介质 | |
CN109145053B (zh) | 数据处理方法和装置、客户端、服务器 | |
CN105357042A (zh) | 一种高可用集群系统及其主节点和从节点 | |
CN111641521A (zh) | 一种基于Ambari的云上部署大数据集群的方法 | |
CN108418859A (zh) | 写数据的方法和装置 | |
US10348596B1 (en) | Data integrity monitoring for a usage analysis system | |
US10706073B1 (en) | Partitioned batch processing for a usage analysis system | |
CN109151016B (zh) | 流量转发方法和装置、服务系统、计算设备及存储介质 | |
CN109413209B (zh) | 一种基于双队列及注册中心的动态负载均衡方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180417 |