CN103299296A - 一种分布式存储系统中分区管理方法、设备及系统 - Google Patents

一种分布式存储系统中分区管理方法、设备及系统 Download PDF

Info

Publication number
CN103299296A
CN103299296A CN2011800030482A CN201180003048A CN103299296A CN 103299296 A CN103299296 A CN 103299296A CN 2011800030482 A CN2011800030482 A CN 2011800030482A CN 201180003048 A CN201180003048 A CN 201180003048A CN 103299296 A CN103299296 A CN 103299296A
Authority
CN
China
Prior art keywords
node
subregion
central controller
mapping table
partition identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800030482A
Other languages
English (en)
Other versions
CN103299296B (zh
Inventor
刘叙友
王道辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN103299296A publication Critical patent/CN103299296A/zh
Application granted granted Critical
Publication of CN103299296B publication Critical patent/CN103299296B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明实施例提供的分布式存储系统中分区管理方法、设备和系统，其中方法包括：中央控制器根据所述分区分布变化，更新对应关系表中所述分区标识的分区版本号，在所述对应关系表中查找所述分区标识对应的存储节点，更新所述分区标识对应的存储节点中的所述分区的分区版本号，从而使得可以从分区的粒度上确定分区的分布变化，进一步的能够通过所述分区的分布变化，只更新所述分区的分区版本号，并只向存储有所述分区的存储节点发送更新后的分区版本号，减少了更新节点上映射表中所述分区标识对应的分区版本号的流量。

Description

PCT国内申请，说明书已公开。

Claims (1)

  1. PCT国内申请，权利要求书已公开。
CN201180003048.2A 2011-12-22 2011-12-22 一种分布式存储系统中分区管理方法、设备及系统 Active CN103299296B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2011/084432 WO2013091212A1 (zh) 2011-12-22 2011-12-22 一种分布式存储系统中分区管理方法、设备及系统

Publications (2)

Publication Number Publication Date
CN103299296A true CN103299296A (zh) 2013-09-11
CN103299296B CN103299296B (zh) 2016-03-09

Family

ID=48667663

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180003048.2A Active CN103299296B (zh) 2011-12-22 2011-12-22 一种分布式存储系统中分区管理方法、设备及系统

Country Status (2)

Country Link
CN (1) CN103299296B (zh)
WO (1) WO2013091212A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105630419A (zh) * 2015-12-25 2016-06-01 华为技术有限公司 一种资源池的分区视图发送方法及管理节点
CN107295063A (zh) * 2017-05-11 2017-10-24 腾讯科技（深圳）有限公司 在对等分布式系统中新增节点的方法及对等分布式系统
CN107943421A (zh) * 2017-11-30 2018-04-20 成都华为技术有限公司 一种基于分布式存储系统的分区划分方法及装置
CN109040212A (zh) * 2018-07-24 2018-12-18 苏州科达科技股份有限公司 设备接入服务器集群方法、系统、设备及存储介质
CN109995813A (zh) * 2017-12-29 2019-07-09 杭州华为数字技术有限公司 一种分区扩展方法、数据存储方法及装置
CN110750369A (zh) * 2019-10-09 2020-02-04 中国人民解放军国防科技大学 一种分布式节点管理方法及系统
CN112632125A (zh) * 2020-12-23 2021-04-09 福信富通科技股份有限公司 一种针对MySQL的分表分区查询方法
CN113238996A (zh) * 2021-05-18 2021-08-10 中国信息通信研究院 基于dht的区块链数据归档方法、电子设备及存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108776579B (zh) * 2018-06-19 2021-10-15 郑州云海信息技术有限公司 一种分布式存储集群扩容方法、装置、设备及存储介质
US11842063B2 (en) 2022-03-25 2023-12-12 Ebay Inc. Data placement and recovery in the event of partition failures

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6029168A (en) * 1998-01-23 2000-02-22 Tricord Systems, Inc. Decentralized file mapping in a striped network file system in a distributed computing environment
WO2008029146A1 (en) * 2006-09-07 2008-03-13 Xploite Plc A distributed file system operable with a plurality of different operating systems
CN102025550A (zh) * 2010-12-20 2011-04-20 中兴通讯股份有限公司 一种分布式集群中数据管理的系统和方法
CN102129442A (zh) * 2010-09-20 2011-07-20 华为技术有限公司 一种分布式数据库系统和数据访问方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5381336B2 (ja) * 2009-05-28 2014-01-08 富士通株式会社 管理プログラム、管理装置および管理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6029168A (en) * 1998-01-23 2000-02-22 Tricord Systems, Inc. Decentralized file mapping in a striped network file system in a distributed computing environment
WO2008029146A1 (en) * 2006-09-07 2008-03-13 Xploite Plc A distributed file system operable with a plurality of different operating systems
CN102129442A (zh) * 2010-09-20 2011-07-20 华为技术有限公司 一种分布式数据库系统和数据访问方法
CN102025550A (zh) * 2010-12-20 2011-04-20 中兴通讯股份有限公司 一种分布式集群中数据管理的系统和方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105630419A (zh) * 2015-12-25 2016-06-01 华为技术有限公司 一种资源池的分区视图发送方法及管理节点
CN105630419B (zh) * 2015-12-25 2018-09-21 华为技术有限公司 一种资源池的分区视图发送方法及管理节点
CN107295063A (zh) * 2017-05-11 2017-10-24 腾讯科技（深圳）有限公司 在对等分布式系统中新增节点的方法及对等分布式系统
CN107295063B (zh) * 2017-05-11 2018-09-04 腾讯科技（深圳）有限公司 在对等分布式系统中新增节点的方法及对等分布式系统
CN107943421A (zh) * 2017-11-30 2018-04-20 成都华为技术有限公司 一种基于分布式存储系统的分区划分方法及装置
CN107943421B (zh) * 2017-11-30 2021-04-20 成都华为技术有限公司 一种基于分布式存储系统的分区划分方法及装置
CN109995813A (zh) * 2017-12-29 2019-07-09 杭州华为数字技术有限公司 一种分区扩展方法、数据存储方法及装置
CN109995813B (zh) * 2017-12-29 2021-02-26 华为技术有限公司 一种分区扩展方法、数据存储方法及装置
CN109040212A (zh) * 2018-07-24 2018-12-18 苏州科达科技股份有限公司 设备接入服务器集群方法、系统、设备及存储介质
CN109040212B (zh) * 2018-07-24 2021-09-21 苏州科达科技股份有限公司 设备接入服务器集群方法、系统、设备及存储介质
CN110750369A (zh) * 2019-10-09 2020-02-04 中国人民解放军国防科技大学 一种分布式节点管理方法及系统
CN110750369B (zh) * 2019-10-09 2022-07-05 中国人民解放军国防科技大学 一种分布式节点管理方法及系统
CN112632125A (zh) * 2020-12-23 2021-04-09 福信富通科技股份有限公司 一种针对MySQL的分表分区查询方法
CN113238996A (zh) * 2021-05-18 2021-08-10 中国信息通信研究院 基于dht的区块链数据归档方法、电子设备及存储介质

Also Published As

Publication number Publication date
CN103299296B (zh) 2016-03-09
WO2013091212A1 (zh) 2013-06-27

Similar Documents

Publication Publication Date Title
CN103299296A (zh) 一种分布式存储系统中分区管理方法、设备及系统
CN102939740B (zh) 分布式数据存储
CN104166606B (zh) 文件备份方法和主存储设备
CN111031096B (zh) 一种基于拟态防御的分布式存储系统构建方法
US9405590B2 (en) Method, apparatus, and system for issuing partition balancing subtask
CN103019960B (zh) 分布式缓存方法及系统
JP2004334574A (ja) ストレージの運用管理プログラム、運用管理方法及び管理計算機
CN106059791B (zh) 一种存储系统中业务的链路切换方法和存储设备
CN101986276B (zh) 文件存储方法、文件恢复方法、系统及服务器
CN104077380B (zh) 一种重复数据删除方法、装置及系统
CN103238140A (zh) 基于去重复的存储系统中用于可扩展引用管理的系统和方法
CN105933391A (zh) 一种节点扩容方法、装置及系统
CN105339929A (zh) 选择用于取消重复数据的存储
CN103354923A (zh) 一种数据重建方法、装置和系统
CN106599308A (zh) 一种分布式元数据管理方法及系统
CN102299904A (zh) 一种实现业务数据备份的系统及方法
CN102308273A (zh) 存储系统
CN105959231A (zh) 一种代理端口通信流量控制方法和冗余设备
CN106407224A (zh) 一种键值存储系统中文件压实的方法和装置
EP3059670B1 (en) Data storage method and storage server
CN104216759A (zh) 一种生成虚拟机的逻辑磁盘的方法，及装置
CN105404565B (zh) 一种双活数据保护方法和装置
CN108228678A (zh) 一种多副本数据恢复方法及装置
JP2015005037A (ja) 情報処理装置、情報処理装置の制御プログラム、および情報処理装置の制御方法
CN106873902A (zh) 一种文件存储系统、数据调度方法及数据节点

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant