CN103475732A - 一种基于虚拟地址池的分布式文件系统数据卷部署方法 - Google Patents
一种基于虚拟地址池的分布式文件系统数据卷部署方法 Download PDFInfo
- Publication number
- CN103475732A CN103475732A CN2013104388045A CN201310438804A CN103475732A CN 103475732 A CN103475732 A CN 103475732A CN 2013104388045 A CN2013104388045 A CN 2013104388045A CN 201310438804 A CN201310438804 A CN 201310438804A CN 103475732 A CN103475732 A CN 103475732A
- Authority
- CN
- China
- Prior art keywords
- back end
- node
- data storage
- cluster
- storage volume
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种基于虚拟地址池的分布式文件系统数据卷部署方法,根据分布式文件系统中通过元数据节点、数据存储节点、客户端节点不同的节点角色构建成节点集群或子集群,在数据节点集群上采用基于虚拟IP地址池的方式部署数据存储卷,实现分布式文件系统数据存储卷的部署与数据节点的物理地址相分离,从而将数据存储卷的部署与数据节点集群的虚拟地址相结合;在分布式文件系统运行的节点上部署监控模块,实现对节点运行状态和负载实时监控;根据节点状态和负载情况,在数据节点集群内实时迁移任一节点所承载的虚拟IP以及挂载到虚拟地址之上的数据存储卷,同时也实现隔离物理节点故障,确保维护物理节点时不中断数据存储卷的数据服务。
Description
技术领域
本发明涉及应用于云计算、云存储领域中的分布式文件系统领域,具体涉及一种基于虚拟地址池的分布式文件系统数据卷部署方法。
背景技术
随着云计算技术、云存储技术应用进一步发展,作为其应用核心的分布式文件系统得到快速应用和发展。由于云计算、云存储应用承载着可扩展、海量存储内容等特征上层业务,而现有的各种单机文件系统由于容量有限、不具有实时可扩展性、无法满足于云相关业务对存储的要求;因此具备动态高可扩展性、集群架构、支持高并发、大容量的分布式文件系统成为云计算业务后端存储设备的选择。
为满足云计算、云存储实际业务的性能需求,根据分布式文件系统设计架构三方分离的原则,需要将其构建在分布式集群节点之上。针对云计算环境中大规模的应用客户端IO访问,元数据模块需要支撑较高的并发访问请求,因而构建在高性能、大容量服务器集群之上;而作为云计算应用中数据存储载体的分布式文件系统的数据存储模块,其显著特点则是通过后端成千上万的数据存储设备提供实时、持续可用的数据存储空间,并支持分布式文件系统客户端模块的大容量、多并发读取和写入数据;如何有效管理数目繁多的数据存储卷、保证在数据节点发生故障时数据存储卷保持挂载状态且实时可用、并能够智能的根据数据节点负载情况表现出挂载灵活性、给分布式文件系统的管理者和维护者带来了挑战。
由于分布式文件系统需要提供海量的存储空间,其通常需要部署在庞大的数据节点集群之上。通过数据节点集群后端的存储设备构造分布式文件系统的海量存储空间,而在节点数量达到一定规模的数据节点集群中,节点故障造成数据存储卷无法访问成为频繁现象,通过将数据存储卷映射给所有数据节点的物理地址并引入高可用软件也只适用于有限数目的节点集群,对于由成千数百数据节点组成的集群以及由多个子集群组成的更大规模数据节点集群,则出现数据节点故障频繁、替换数据节点复杂、替换时间长以及不完全替换现象,造成产生无法访问数据存储卷或者访问频繁中断问题。这种情况下则需要对现有分布式文件系统的部署方法进行改进,实现一种高效处理分布式文件系统中数量繁多的数据节点和数据存储卷的管理工作。
发明内容
本发明的目的是提供一种基于虚拟地址池的分布式文件系统数据卷部署方法。
本发明的目的是按以下方式实现的,根据分布式文件系统中通过元数据节点、数据存储节点、客户端节点不同的节点角色构建成节点集群或子集群,在数据节点集群上采用基于虚拟IP地址池的方式部署数据存储卷,实现分布式文件系统数据存储卷的部署与数据节点的物理地址相分离,从而将数据存储卷的部署与数据节点集群的虚拟地址相结合;在分布式文件系统运行的节点上部署监控模块,实现对节点运行状态和负载实时监控;根据节点状态和负载情况,在数据节点集群内实时迁移任一节点所承载的虚拟IP以及挂载到虚拟地址之上的数据存储卷,同时也实现隔离物理节点故障,确保维护物理节点时不中断数据存储卷的数据服务,这在大规模部署分布式文件系统的环境中,数据节点集群中数据节点数目较多又进一步划分为数据节点子集群的环境更为有效,该系统架构包括:虚拟地址池管理模块(1)、节点状态和负载监控模块(2)、数据存储卷高可用管理模块(3),其中:
虚拟地址池管理模块(1)用于在数据节点子集群中管理虚拟IP地址池,并在数据节点子集群的所有数据节点上根据预先设定的规则分配虚拟IP地址;在数据节点发生故障时,接收对虚拟地址的管理命令,将虚拟IP地址迁移到指定的数据节点上;并对虚拟地址池中的IP地址进行增加、删除的常规维护;
节点状态和负载监控模块(2)用于对数据节点的运行状态和节点负载情况进行实时监控,实时获取数据节点的运行状态和负载情况,并在节点故障和负载超标时通知虚拟地址池管理模块(1)和数据存储卷高可用模块(3)分别完成虚拟IP地址和数据存储卷在数据子集群中的节点上迁移;
数据存储卷高可用管理模块(3)用于对数据子集群内的所有数据存储卷进行管理,部署文件系统时,根据数据节点子集群内数据节点信息以及数据节点子集群的虚拟地址池中地址信息,初始化子集群中所有数据存储卷,实现数据节点子集群内数据存储卷与虚拟IP地址的映射,同时,该模块接收节点状态和负载监控模块(2)的监控信息,并在数据子集群内的某一数据节点故障或负载较大时,将此数据节点上挂载的数据存储卷迁移到数据节点子集群内的其它数据节点上,确保数据存储卷的持续可访问。
为满足分布式文件系统中数目繁多的数据存储卷在数据节点上尽可能保持挂载状态,则将数据存储卷映射给数据集群中所有节点的物理IP地址,当某一数据节点出现故障需要替换时,替换节点地址相关参数必须与故障节点完全一致,这种情况则不能满足和不完全替换包括:故障节点恢复后仍然存在于集群中故障节点的情况,特别是故障节点恢复正常后,切换存储卷服务时则出现多个相同主机现象,使得数据存储卷的迁移由于存在多个相同主机而无法提供正常服务,这就需要引入基于虚拟地址的数据存储卷挂载映射关系,实现数据存储卷与数据节点的映射不再依赖于数据节点的物理IP地址。
由成百数千数据节点组成的数据存储集群中,构建部署在数据节点子集群上的虚拟IP地址池,并将虚拟地址池中的IP地址动态分配到数据节点子集群中所有数据节点上,通过映射数据集群后端的数据存储卷到虚拟IP地址,分离数据存储卷的挂载地址与数据节点物理IP之间的映射关系,利用虚拟IP地址动态分配和迁移特性,实现数据存储卷的灵活迁移,在数据子集群中的任意数据节点发生故障时保证了子集群中数据存储卷的服务持续性。
本发明的有益效果是:根据数据节点和存储设备的规模设立数据节点集群(或子集群),在集群的数据节点上分别部署虚拟地址池管理模块(1)、节点状态和负载监控模块(2)、数据存储卷高可用管理模块(3),实现数据存储卷的映射和挂载依赖于虚拟地址,而不再依赖于物理地址,也就不再为了修改卷的映射地址而中断数据卷服务,保证了数据卷的持续访问;数据存储卷不依赖于节点的物理地址,也就实现了数据存储卷服务与物理地址无关,这就极大方便了对数据节点的管理,可以任意的增加、删除数据节点不影响数据存储卷的服务。本方法提高了分布式文件系统维护的效率,减小了维护操作对文件系统服务的影响,从而提高文件系统服务质量。
另外本方法设计思路也适用于分布式文件系统的元数据节点集群共享存储卷情况;也适用于云计算和云存储部署环境中,由于设备数目较多、且内部模块服务对物理地址的依赖性较强的情况。
附图说明
图1是分布式文件系统数据卷部署示意图;
图2是系统初始化流程图。
具体实施方式
参照说明书附图对本发明的方法作以下详细地说明。
本发明内容基于分布式文件系统进行构建,通过在数据节点(子)集群上建立虚拟地址池实现池中虚拟IP地址在数据节点子集群中动态分配和迁移;将数据节点(子)集群后端的数据存储卷映射给虚拟地址池中的所有虚拟IP地址,使得数据存储卷的挂载不再依赖于数据节点的物理地址,实现任一数据节点发生故障或者负载较高时将数据存储卷迁移到子集群中的任意节点,同时替换节点的网络相关参数也不必与故障节点的网络参数相同;通过在数据节点(子)集群中所有数据节点上部署监控模块,实时获取各个数据节点的运行状态和性能负载,通过设定资源均衡策略实现虚拟地址和数据存储卷在数据节点(子)集群中动态迁移,从而实现性能的负载均衡,保证分布式文件系统数据服务的稳定性。该方法的构建结构包括:虚拟地址池管理模块(1)、节点状态和负载监控模块(2)、数据存储卷高可用管理模块(3)。其中:
虚拟地址池管理模块(1)部署在数据节点(子)集群中的所有数据节点上,并相互通信保持虚拟地址池内地址信息的一致性和有效性。支持在其所属集群中动态添加、删除、冻结数据节点,新节点加入集群并完成数据初始化后,将包含虚拟地址池的所有虚拟地址信息及子集群物理地址信息;将节点删除时,将先在地址池管理模块中完成冻结,冻结一旦完成,其所承担的虚拟地址也将迁移到其它数据节点,虚拟地址一旦迁移,挂载到虚拟地址上的数据存储卷也将由数据存储卷高可用管理模块(3)迁移到其它数据节点。
节点状态和负载监控模块(2)部署在数据节点(子)集群中的所有数据节点上,对每个数据节点的运行状态和cpu、内存、网络进行实时监控,并在性能超过预先设定或默认的负载阈值时,发送调度信息给本节点上运行的虚拟地址池管理模块(1)和数据存储卷高可用管理模块(3),实现将虚拟地址和数据存储卷迁移到其它数据节点。
数据存储卷高可用管理模块(3)部署到数据节点(子)集群中的所有数据节点上,实现本数据节点子集群后端的数据存储卷的映射管理和挂载状态维护,并根据虚拟地址在数据节点上的运行状态实现卷的挂载和卸载操作,根据虚拟地址的实时迁移、节点状态和负载监控模块(2) 发送的节点状态及负载信息,完成数据存储卷的挂载迁移,实现数据访问会话交接。
除说明书所述的技术特征外,均为本专业技术人员的已知技术。
Claims (3)
1.一种基于虚拟地址池的分布式文件系统数据卷部署方法, 其特征在于根据分布式文件系统中通过元数据节点、数据存储节点、客户端节点不同的节点角色构建成节点集群或子集群,在数据节点集群上采用基于虚拟IP地址池的方式部署数据存储卷,实现分布式文件系统数据存储卷的部署与数据节点的物理地址相分离,从而将数据存储卷的部署与数据节点集群的虚拟地址相结合;在分布式文件系统运行的节点上部署监控模块,实现对节点运行状态和负载实时监控;根据节点状态和负载情况,在数据节点集群内实时迁移任一节点所承载的虚拟IP以及挂载到虚拟地址之上的数据存储卷,同时也实现隔离物理节点故障,确保维护物理节点时不中断数据存储卷的数据服务,这在大规模部署分布式文件系统的环境中,数据节点集群中数据节点数目较多又进一步划分为数据节点子集群的环境更为有效,该系统架构包括:虚拟地址池管理模块(1)、节点状态和负载监控模块(2)、数据存储卷高可用管理模块(3),其中:
虚拟地址池管理模块(1)用于在数据节点子集群中管理虚拟IP地址池,并在数据节点子集群的所有数据节点上根据预先设定的规则分配虚拟IP地址;在数据节点发生故障时,接收对虚拟地址的管理命令,将虚拟IP地址迁移到指定的数据节点上;并对虚拟地址池中的IP地址进行增加、删除的常规维护;
节点状态和负载监控模块(2)用于对数据节点的运行状态和节点负载情况进行实时监控,实时获取数据节点的运行状态和负载情况,并在节点故障和负载超标时通知虚拟地址池管理模块(1)和数据存储卷高可用模块(3)分别完成虚拟IP地址和数据存储卷在数据子集群中的节点上迁移;
数据存储卷高可用管理模块(3)用于对数据子集群内的所有数据存储卷进行管理,部署文件系统时,根据数据节点子集群内数据节点信息以及数据节点子集群的虚拟地址池中地址信息,初始化子集群中所有数据存储卷,实现数据节点子集群内数据存储卷与虚拟IP地址的映射,同时,该模块接收节点状态和负载监控模块(2)的监控信息,并在数据子集群内的某一数据节点故障或负载较大时,将此数据节点上挂载的数据存储卷迁移到数据节点子集群内的其它数据节点上,确保数据存储卷的持续可访问。
2.根据权利要求1所述的基于虚拟地址池的分布式文件系统数据卷部署方法,其特征在于为满足分布式文件系统中数目繁多的数据存储卷在数据节点上尽可能保持挂载状态,则将数据存储卷映射给数据集群中所有节点的物理IP地址,当某一数据节点出现故障需要替换时,替换节点地址相关参数必须与故障节点完全一致,这种情况则不能满足和不完全替换包括:故障节点恢复后仍然存在于集群中故障节点的情况,特别是故障节点恢复正常后,切换存储卷服务时则出现多个相同主机现象,使得数据存储卷的迁移由于存在多个相同主机而无法提供正常服务,这就需要引入基于虚拟地址的数据存储卷挂载映射关系,实现数据存储卷与数据节点的映射不再依赖于数据节点的物理IP地址。
3.根据权利要求1所述的基于虚拟地址池的分布式文件系统数据卷部署方法,其特征在于由成百数千数据节点组成的数据存储集群中,构建部署在数据节点子集群上的虚拟IP地址池,并将虚拟地址池中的IP地址动态分配到数据节点子集群中所有数据节点上,通过映射数据集群后端的数据存储卷到虚拟IP地址,分离数据存储卷的挂载地址与数据节点物理IP之间的映射关系,利用虚拟IP地址动态分配和迁移特性,实现数据存储卷的灵活迁移,在数据子集群中的任意数据节点发生故障时保证了子集群中数据存储卷的服务持续性。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2013104388045A CN103475732A (zh) | 2013-09-25 | 2013-09-25 | 一种基于虚拟地址池的分布式文件系统数据卷部署方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2013104388045A CN103475732A (zh) | 2013-09-25 | 2013-09-25 | 一种基于虚拟地址池的分布式文件系统数据卷部署方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103475732A true CN103475732A (zh) | 2013-12-25 |
Family
ID=49800425
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2013104388045A Pending CN103475732A (zh) | 2013-09-25 | 2013-09-25 | 一种基于虚拟地址池的分布式文件系统数据卷部署方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103475732A (zh) |
Cited By (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105141400A (zh) * | 2015-07-30 | 2015-12-09 | 杭州华为数字技术有限公司 | 一种高可用性集群管理方法及相关设备 |
CN105376093A (zh) * | 2015-11-19 | 2016-03-02 | 中冶南方(武汉)自动化有限公司 | 海量数据点的分布式管理方法及系统 |
WO2016065610A1 (zh) * | 2014-10-31 | 2016-05-06 | 华为技术有限公司 | 访问文件的方法、分布式存储系统和存储节点 |
CN105592139A (zh) * | 2015-10-28 | 2016-05-18 | 杭州华三通信技术有限公司 | 一种分布式文件系统管理平台的ha实现方法及装置 |
CN105635276A (zh) * | 2015-12-28 | 2016-06-01 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
CN106331132A (zh) * | 2016-08-31 | 2017-01-11 | 天津南大通用数据技术股份有限公司 | 一种分布式数据库中节点的替换方法及装置 |
CN106790565A (zh) * | 2016-12-27 | 2017-05-31 | 中国电子科技集团公司第五十二研究所 | 一种网络附属存储集群系统 |
CN107155307A (zh) * | 2014-10-31 | 2017-09-12 | 华为技术有限公司 | 访问文件的方法、系统和主机 |
CN107404524A (zh) * | 2017-07-24 | 2017-11-28 | 郑州云海信息技术有限公司 | 一种分布式集群节点访问的方法及装置 |
CN107544746A (zh) * | 2016-06-24 | 2018-01-05 | 杭州海康威视数字技术股份有限公司 | 存储设备的异构处理方法、异构处理装置及系统 |
CN107566182A (zh) * | 2017-09-14 | 2018-01-09 | 郑州云海信息技术有限公司 | 一种网络文件系统的接管方法及系统 |
CN108023953A (zh) * | 2017-12-04 | 2018-05-11 | 北京小度信息科技有限公司 | Ftp服务的高可用实现方法和装置 |
CN108259239A (zh) * | 2018-01-11 | 2018-07-06 | 郑州云海信息技术有限公司 | 一种数据库高可用性保障方法和系统 |
CN108334291A (zh) * | 2018-03-07 | 2018-07-27 | 成都创信特电子技术有限公司 | 建立移动终端可信环境的方法 |
CN109032830A (zh) * | 2018-07-25 | 2018-12-18 | 广东浪潮大数据研究有限公司 | 一种分布式存储系统的故障恢复方法、系统及相关组件 |
CN109151028A (zh) * | 2018-08-23 | 2019-01-04 | 郑州云海信息技术有限公司 | 一种分布式存储系统容灾方法及装置 |
CN109446178A (zh) * | 2018-11-13 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种Hadoop对象存储高可用方法、系统、装置及可读存储介质 |
CN109451090A (zh) * | 2018-11-13 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种域名解析方法及装置 |
CN109542338A (zh) * | 2018-10-19 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种实现分布式存储系统中节点信息一致性方法及装置 |
CN110110004A (zh) * | 2018-01-30 | 2019-08-09 | 腾讯科技(深圳)有限公司 | 一种数据操作方法、装置和存储介质 |
CN110413584A (zh) * | 2019-07-24 | 2019-11-05 | 无锡华云数据技术服务有限公司 | 数据存储方法、装置、设备及存储介质 |
CN111124275A (zh) * | 2019-11-15 | 2020-05-08 | 苏州浪潮智能科技有限公司 | 一种分布式块存储系统的监控服务优化方法及装置 |
CN111866041A (zh) * | 2019-04-28 | 2020-10-30 | 杭州海康威视系统技术有限公司 | 业务设备选取、云存储集群更新的方法、装置及存储介质 |
CN111866210A (zh) * | 2020-07-08 | 2020-10-30 | 苏州浪潮智能科技有限公司 | 一种虚拟ip均衡分配方法、系统、终端及存储介质 |
CN112214466A (zh) * | 2019-07-12 | 2021-01-12 | 海能达通信股份有限公司 | 分布式集群系统及数据写入方法、电子设备、存储装置 |
CN112241365A (zh) * | 2020-07-24 | 2021-01-19 | 国家计算机网络与信息安全管理中心 | 一种面向Namenode的高效元数据构建和RPC性能提升的方法和装置 |
US11082523B2 (en) | 2017-02-09 | 2021-08-03 | International Business Machines Corporation | System, method and computer program product for a distributed virtual address space |
CN114285729A (zh) * | 2021-11-29 | 2022-04-05 | 苏州浪潮智能科技有限公司 | 分布式集群管理节点部署方法、装置、设备及存储介质 |
CN114499778A (zh) * | 2021-12-31 | 2022-05-13 | 武汉达梦数据技术有限公司 | 维护云平台双活的装置、方法、系统和存储介质 |
CN114513490A (zh) * | 2020-10-23 | 2022-05-17 | 北京旷视科技有限公司 | 一种视图库集群 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102136003A (zh) * | 2011-03-25 | 2011-07-27 | 上海交通大学 | 大规模分布式存储系统 |
-
2013
- 2013-09-25 CN CN2013104388045A patent/CN103475732A/zh active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102136003A (zh) * | 2011-03-25 | 2011-07-27 | 上海交通大学 | 大规模分布式存储系统 |
Non-Patent Citations (1)
Title |
---|
杨帆: "Hadoop 平台高可用性方案的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105765542A (zh) * | 2014-10-31 | 2016-07-13 | 华为技术有限公司 | 访问文件的方法、分布式存储系统和存储节点 |
CN105765542B (zh) * | 2014-10-31 | 2019-11-15 | 华为技术有限公司 | 访问文件的方法、分布式存储系统和存储节点 |
WO2016065610A1 (zh) * | 2014-10-31 | 2016-05-06 | 华为技术有限公司 | 访问文件的方法、分布式存储系统和存储节点 |
CN107155307A (zh) * | 2014-10-31 | 2017-09-12 | 华为技术有限公司 | 访问文件的方法、系统和主机 |
CN107155307B (zh) * | 2014-10-31 | 2020-04-28 | 华为技术有限公司 | 访问文件的方法、系统和主机 |
CN105141400A (zh) * | 2015-07-30 | 2015-12-09 | 杭州华为数字技术有限公司 | 一种高可用性集群管理方法及相关设备 |
CN105141400B (zh) * | 2015-07-30 | 2018-08-21 | 杭州华为数字技术有限公司 | 一种高可用性集群管理方法及相关设备 |
CN105592139A (zh) * | 2015-10-28 | 2016-05-18 | 杭州华三通信技术有限公司 | 一种分布式文件系统管理平台的ha实现方法及装置 |
CN105592139B (zh) * | 2015-10-28 | 2019-03-15 | 新华三技术有限公司 | 一种分布式文件系统管理平台的ha实现方法及装置 |
CN105376093A (zh) * | 2015-11-19 | 2016-03-02 | 中冶南方(武汉)自动化有限公司 | 海量数据点的分布式管理方法及系统 |
CN105376093B (zh) * | 2015-11-19 | 2018-11-30 | 中冶南方(武汉)自动化有限公司 | 海量数据点的分布式管理方法及系统 |
CN105635276A (zh) * | 2015-12-28 | 2016-06-01 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
CN105635276B (zh) * | 2015-12-28 | 2019-05-21 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
CN107544746A (zh) * | 2016-06-24 | 2018-01-05 | 杭州海康威视数字技术股份有限公司 | 存储设备的异构处理方法、异构处理装置及系统 |
CN107544746B (zh) * | 2016-06-24 | 2020-08-07 | 杭州海康威视数字技术股份有限公司 | 存储设备的异构处理方法、异构处理装置及系统 |
CN106331132A (zh) * | 2016-08-31 | 2017-01-11 | 天津南大通用数据技术股份有限公司 | 一种分布式数据库中节点的替换方法及装置 |
CN106790565A (zh) * | 2016-12-27 | 2017-05-31 | 中国电子科技集团公司第五十二研究所 | 一种网络附属存储集群系统 |
CN106790565B (zh) * | 2016-12-27 | 2019-11-29 | 中国电子科技集团公司第五十二研究所 | 一种网络附属存储集群系统 |
US11082523B2 (en) | 2017-02-09 | 2021-08-03 | International Business Machines Corporation | System, method and computer program product for a distributed virtual address space |
CN107404524B (zh) * | 2017-07-24 | 2020-07-07 | 郑州云海信息技术有限公司 | 一种分布式集群节点访问的方法及装置 |
CN107404524A (zh) * | 2017-07-24 | 2017-11-28 | 郑州云海信息技术有限公司 | 一种分布式集群节点访问的方法及装置 |
CN107566182A (zh) * | 2017-09-14 | 2018-01-09 | 郑州云海信息技术有限公司 | 一种网络文件系统的接管方法及系统 |
CN108023953A (zh) * | 2017-12-04 | 2018-05-11 | 北京小度信息科技有限公司 | Ftp服务的高可用实现方法和装置 |
CN108259239A (zh) * | 2018-01-11 | 2018-07-06 | 郑州云海信息技术有限公司 | 一种数据库高可用性保障方法和系统 |
CN110110004A (zh) * | 2018-01-30 | 2019-08-09 | 腾讯科技(深圳)有限公司 | 一种数据操作方法、装置和存储介质 |
CN108334291A (zh) * | 2018-03-07 | 2018-07-27 | 成都创信特电子技术有限公司 | 建立移动终端可信环境的方法 |
CN109032830A (zh) * | 2018-07-25 | 2018-12-18 | 广东浪潮大数据研究有限公司 | 一种分布式存储系统的故障恢复方法、系统及相关组件 |
CN109151028A (zh) * | 2018-08-23 | 2019-01-04 | 郑州云海信息技术有限公司 | 一种分布式存储系统容灾方法及装置 |
CN109542338A (zh) * | 2018-10-19 | 2019-03-29 | 郑州云海信息技术有限公司 | 一种实现分布式存储系统中节点信息一致性方法及装置 |
CN109542338B (zh) * | 2018-10-19 | 2022-02-18 | 郑州云海信息技术有限公司 | 一种实现分布式存储系统中节点信息一致性方法及装置 |
CN109451090A (zh) * | 2018-11-13 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种域名解析方法及装置 |
CN109446178A (zh) * | 2018-11-13 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种Hadoop对象存储高可用方法、系统、装置及可读存储介质 |
CN109451090B (zh) * | 2018-11-13 | 2021-08-10 | 郑州云海信息技术有限公司 | 一种域名解析方法及装置 |
CN111866041A (zh) * | 2019-04-28 | 2020-10-30 | 杭州海康威视系统技术有限公司 | 业务设备选取、云存储集群更新的方法、装置及存储介质 |
CN111866041B (zh) * | 2019-04-28 | 2023-05-02 | 杭州海康威视系统技术有限公司 | 业务设备选取、云存储集群更新的方法、装置及存储介质 |
CN112214466A (zh) * | 2019-07-12 | 2021-01-12 | 海能达通信股份有限公司 | 分布式集群系统及数据写入方法、电子设备、存储装置 |
CN110413584A (zh) * | 2019-07-24 | 2019-11-05 | 无锡华云数据技术服务有限公司 | 数据存储方法、装置、设备及存储介质 |
CN111124275B (zh) * | 2019-11-15 | 2022-10-18 | 苏州浪潮智能科技有限公司 | 一种分布式块存储系统的监控服务优化方法及装置 |
CN111124275A (zh) * | 2019-11-15 | 2020-05-08 | 苏州浪潮智能科技有限公司 | 一种分布式块存储系统的监控服务优化方法及装置 |
CN111866210A (zh) * | 2020-07-08 | 2020-10-30 | 苏州浪潮智能科技有限公司 | 一种虚拟ip均衡分配方法、系统、终端及存储介质 |
CN112241365A (zh) * | 2020-07-24 | 2021-01-19 | 国家计算机网络与信息安全管理中心 | 一种面向Namenode的高效元数据构建和RPC性能提升的方法和装置 |
CN114513490A (zh) * | 2020-10-23 | 2022-05-17 | 北京旷视科技有限公司 | 一种视图库集群 |
CN114285729A (zh) * | 2021-11-29 | 2022-04-05 | 苏州浪潮智能科技有限公司 | 分布式集群管理节点部署方法、装置、设备及存储介质 |
CN114285729B (zh) * | 2021-11-29 | 2023-08-25 | 苏州浪潮智能科技有限公司 | 分布式集群管理节点部署方法、装置、设备及存储介质 |
CN114499778A (zh) * | 2021-12-31 | 2022-05-13 | 武汉达梦数据技术有限公司 | 维护云平台双活的装置、方法、系统和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103475732A (zh) | 一种基于虚拟地址池的分布式文件系统数据卷部署方法 | |
CN104320401B (zh) | 一种基于分布式文件系统的大数据存储访问系统及方法 | |
CN105357296B (zh) | 一种Docker云平台下弹性缓存系统 | |
Rao et al. | Performance issues of heterogeneous hadoop clusters in cloud computing | |
CN105095317B (zh) | 分布式数据库服务管理系统 | |
CN102413172B (zh) | 一种基于集群技术的并行数据共享装置方法和装置 | |
EP3039844B1 (en) | System and method for supporting partition level journaling for synchronizing data in a distributed data grid | |
CN103929500A (zh) | 一种分布式存储系统的数据分片方法 | |
CN104735110B (zh) | 元数据管理方法和系统 | |
US20150120923A1 (en) | Optimization Of Resource Utilization In A Collection of Devices | |
CN111031096A (zh) | 一种基于拟态防御的分布式存储系统构建方法 | |
CN105187512A (zh) | 一种虚拟机集群负载均衡方法及系统 | |
CN102708158B (zh) | 一种PostgreSQL云存储归档调度系统 | |
US9104745B1 (en) | Distributed log collector and report generation | |
CN103455577A (zh) | 云主机镜像文件的多备份就近存储和读取方法及系统 | |
CN109218100A (zh) | 分布式对象存储集群及其请求响应方法、系统和存储介质 | |
CN102929769A (zh) | 一种基于代理服务的虚拟机内部数据采集方法 | |
CN103795801A (zh) | 一种基于实时应用集群的元数据集群设计方法 | |
CN104077199A (zh) | 基于共享磁盘的高可用集群的隔离方法和系统 | |
CN110784539A (zh) | 一种基于云计算的数据管理系统及方法 | |
CN104298574A (zh) | 一种数据高速存储处理系统 | |
CN108921728B (zh) | 基于电网调度系统的分布式实时库系统 | |
CN105468296A (zh) | 基于虚拟化平台的无共享存储管理方法 | |
CN109871365A (zh) | 一种分布式文件系统 | |
CN105760391B (zh) | 数据动态重分布的方法、数据节点、名字节点及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20131225 |
|
WD01 | Invention patent application deemed withdrawn after publication |