CN110337633A - 一种数据存储方法及设备 - Google Patents

一种数据存储方法及设备 Download PDF

Info

Publication number
CN110337633A
CN110337633A CN201780087416.3A CN201780087416A CN110337633A CN 110337633 A CN110337633 A CN 110337633A CN 201780087416 A CN201780087416 A CN 201780087416A CN 110337633 A CN110337633 A CN 110337633A
Authority
CN
China
Prior art keywords
node
memory
data
write request
data object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780087416.3A
Other languages
English (en)
Inventor
于群
徐君
陈荔城
黄永兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN110337633A publication Critical patent/CN110337633A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种数据存储方法及设备，用以减少分布式存储系统向客户端响应写请求的时间。在该方法中，第一节点中的网卡在确定所述第一节点以及待存储第一数据的至少一个从节点均已经成功缓存包含所述第一数据的第一写请求后，即向客户端返回成功响应消息。因此，该方法不仅可以减少所述分布式存储系统响应所述客户端的时间中由所述第一节点保存所述第一数据所消耗的时间，还可以减少由从节点保存所述第一数据所消耗的时间，从而可以最大限度的降低所述分布式存储系统向客户端响应所述第一写请求的时间。

Description

PCT国内申请，说明书已公开。

Claims (14)

  1. PCT国内申请，权利要求书已公开。
CN201780087416.3A 2017-06-30 2017-06-30 一种数据存储方法及设备 Pending CN110337633A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/091240 WO2019000423A1 (zh) 2017-06-30 2017-06-30 一种数据存储方法及设备

Publications (1)

Publication Number Publication Date
CN110337633A true CN110337633A (zh) 2019-10-15

Family

ID=64740801

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780087416.3A Pending CN110337633A (zh) 2017-06-30 2017-06-30 一种数据存储方法及设备

Country Status (2)

Country Link
CN (1) CN110337633A (zh)
WO (1) WO2019000423A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111813334A (zh) * 2020-06-04 2020-10-23 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN113297324A (zh) * 2021-04-13 2021-08-24 福建天泉教育科技有限公司 一种数据写入的优化方法及终端
CN114489464A (zh) * 2020-10-27 2022-05-13 北京金山云网络技术有限公司 数据写入方法、装置和电子设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115712581A (zh) * 2021-08-23 2023-02-24 华为技术有限公司 数据访问方法、存储系统及存储节点
CN118550761A (zh) * 2023-02-24 2024-08-27 华为技术有限公司 一种存储系统的同步远程复制方法及装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567505A (zh) * 2011-12-26 2012-07-11 中兴通讯股份有限公司 一种分布式数据库及其数据操作方法
CN103514173A (zh) * 2012-06-20 2014-01-15 华为技术有限公司 数据处理的方法和节点设备
CN104125303A (zh) * 2014-08-12 2014-10-29 北京奇虎科技有限公司 数据读写请求方法、客户端及系统
CN104135539A (zh) * 2014-08-15 2014-11-05 华为技术有限公司 数据存储方法、sdn控制器和分布式网络存储系统
CN105095013A (zh) * 2015-06-04 2015-11-25 华为技术有限公司 数据存储方法、恢复方法、相关装置以及系统
CN105160039A (zh) * 2015-10-13 2015-12-16 四川携创信息技术服务有限公司 一种基于大数据的查询方法
CN105278877A (zh) * 2015-09-30 2016-01-27 成都华为技术有限公司 一种对象存储方法和装置
CN105739924A (zh) * 2016-01-29 2016-07-06 华为技术有限公司 基于缓存集群的缓存方法和系统
CN106603692A (zh) * 2016-12-27 2017-04-26 中国银联股份有限公司 一种分布式存储系统中的数据存储方法及装置
US9645761B1 (en) * 2016-01-28 2017-05-09 Weka.IO Ltd. Congestion mitigation in a multi-tiered distributed storage system
CN106873902A (zh) * 2015-12-11 2017-06-20 杭州华为数字技术有限公司 一种文件存储系统、数据调度方法及数据节点

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105450588B (zh) * 2014-07-31 2019-02-12 华为技术有限公司 一种基于rdma的数据传输方法及rdma网卡
CN106569729A (zh) * 2015-10-09 2017-04-19 阿里巴巴集团控股有限公司 用于分布式系统中数据写入的方法和设备

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567505A (zh) * 2011-12-26 2012-07-11 中兴通讯股份有限公司 一种分布式数据库及其数据操作方法
CN103514173A (zh) * 2012-06-20 2014-01-15 华为技术有限公司 数据处理的方法和节点设备
CN104125303A (zh) * 2014-08-12 2014-10-29 北京奇虎科技有限公司 数据读写请求方法、客户端及系统
CN104135539A (zh) * 2014-08-15 2014-11-05 华为技术有限公司 数据存储方法、sdn控制器和分布式网络存储系统
CN105095013A (zh) * 2015-06-04 2015-11-25 华为技术有限公司 数据存储方法、恢复方法、相关装置以及系统
CN105278877A (zh) * 2015-09-30 2016-01-27 成都华为技术有限公司 一种对象存储方法和装置
CN105160039A (zh) * 2015-10-13 2015-12-16 四川携创信息技术服务有限公司 一种基于大数据的查询方法
CN106873902A (zh) * 2015-12-11 2017-06-20 杭州华为数字技术有限公司 一种文件存储系统、数据调度方法及数据节点
US9645761B1 (en) * 2016-01-28 2017-05-09 Weka.IO Ltd. Congestion mitigation in a multi-tiered distributed storage system
CN105739924A (zh) * 2016-01-29 2016-07-06 华为技术有限公司 基于缓存集群的缓存方法和系统
CN106603692A (zh) * 2016-12-27 2017-04-26 中国银联股份有限公司 一种分布式存储系统中的数据存储方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张均宝: "《未来就绪的系统架构》", 31 August 2015 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111813334A (zh) * 2020-06-04 2020-10-23 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN111813334B (zh) * 2020-06-04 2024-04-05 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN114489464A (zh) * 2020-10-27 2022-05-13 北京金山云网络技术有限公司 数据写入方法、装置和电子设备
CN113297324A (zh) * 2021-04-13 2021-08-24 福建天泉教育科技有限公司 一种数据写入的优化方法及终端
CN113297324B (zh) * 2021-04-13 2023-05-23 福建天泉教育科技有限公司 一种数据写入的优化方法及终端

Also Published As

Publication number Publication date
WO2019000423A1 (zh) 2019-01-03

Similar Documents

Publication Publication Date Title
CN110337633A (zh) 一种数据存储方法及设备
US10585617B1 (en) Buffering copy requests in a storage system
KR101993915B1 (ko) 원격으로 액세스되는 데이터의 효율적인 라이브-이송
US11550819B2 (en) Synchronization cache seeding
US20180321846A1 (en) Method and storage array for procesing a write data request
US9507720B2 (en) Block storage-based data processing methods, apparatus, and systems
US20190199794A1 (en) Efficient replication of changes to a byte-addressable persistent memory over a network
CN113110916B (zh) 一种虚拟机数据读写方法、装置、设备及介质
CA2920004C (en) Data deduplication method and storage array
US11184418B2 (en) Stream processing utilizing virtual processing agents
US11416176B2 (en) Function processing using storage controllers for load sharing
CN108475201A (zh) 一种虚拟机启动过程中的数据获取方法和云计算系统
US8090907B2 (en) Method for migration of synchronous remote copy service to a virtualization appliance
CN105574008B (zh) 应用于分布式文件系统的任务调度方法和设备
CN109889561A (zh) 一种数据处理方法及装置
US10564847B1 (en) Data movement bulk copy operation
US10733118B2 (en) Computer system, communication device, and storage control method with DMA transfer of data
KR20190112020A (ko) 데이터 처리
US8352960B2 (en) Limiting receipt of unsolicited events by a logical partition in a data storage system
US10324660B2 (en) Determining whether to compress data prior to storage thereof
US10101940B1 (en) Data retrieval system and method
US9158735B1 (en) Techniques for generating unique identifiers
CN108804029B (zh) 使用原子多播的快速排序写入的方法和系统
US11372554B1 (en) Cache management system and method
WO2023061559A1 (en) Data storage apparatus and method of data management in the data storage apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination