CN110337633A - 一种数据存储方法及设备 - Google Patents

一种数据存储方法及设备 Download PDF

Info

Publication number
CN110337633A
CN110337633A CN201780087416.3A CN201780087416A CN110337633A CN 110337633 A CN110337633 A CN 110337633A CN 201780087416 A CN201780087416 A CN 201780087416A CN 110337633 A CN110337633 A CN 110337633A
Authority
CN
China
Prior art keywords
node
memory
data
write request
data object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780087416.3A
Other languages
English (en)
Inventor
于群
徐君
陈荔城
黄永兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN110337633A publication Critical patent/CN110337633A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种数据存储方法及设备，用以减少分布式存储系统向客户端响应写请求的时间。在该方法中，第一节点中的网卡在确定所述第一节点以及待存储第一数据的至少一个从节点均已经成功缓存包含所述第一数据的第一写请求后，即向客户端返回成功响应消息。因此，该方法不仅可以减少所述分布式存储系统响应所述客户端的时间中由所述第一节点保存所述第一数据所消耗的时间，还可以减少由从节点保存所述第一数据所消耗的时间，从而可以最大限度的降低所述分布式存储系统向客户端响应所述第一写请求的时间。

Description

PCT国内申请，说明书已公开。

Claims (14)

  1. PCT国内申请，权利要求书已公开。
CN201780087416.3A 2017-06-30 2017-06-30 一种数据存储方法及设备 Pending CN110337633A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/091240 WO2019000423A1 (zh) 2017-06-30 2017-06-30 一种数据存储方法及设备

Publications (1)

Publication Number Publication Date
CN110337633A true CN110337633A (zh) 2019-10-15

Family

ID=64740801

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780087416.3A Pending CN110337633A (zh) 2017-06-30 2017-06-30 一种数据存储方法及设备

Country Status (2)

Country Link
CN (1) CN110337633A (zh)
WO (1) WO2019000423A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111813334A (zh) * 2020-06-04 2020-10-23 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN113297324A (zh) * 2021-04-13 2021-08-24 福建天泉教育科技有限公司 一种数据写入的优化方法及终端
CN114489464A (zh) * 2020-10-27 2022-05-13 北京金山云网络技术有限公司 数据写入方法、装置和电子设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115712581A (zh) * 2021-08-23 2023-02-24 华为技术有限公司 数据访问方法、存储系统及存储节点

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567505A (zh) * 2011-12-26 2012-07-11 中兴通讯股份有限公司 一种分布式数据库及其数据操作方法
CN103514173A (zh) * 2012-06-20 2014-01-15 华为技术有限公司 数据处理的方法和节点设备
CN104125303A (zh) * 2014-08-12 2014-10-29 北京奇虎科技有限公司 数据读写请求方法、客户端及系统
CN104135539A (zh) * 2014-08-15 2014-11-05 华为技术有限公司 数据存储方法、sdn控制器和分布式网络存储系统
CN105095013A (zh) * 2015-06-04 2015-11-25 华为技术有限公司 数据存储方法、恢复方法、相关装置以及系统
CN105160039A (zh) * 2015-10-13 2015-12-16 四川携创信息技术服务有限公司 一种基于大数据的查询方法
CN105278877A (zh) * 2015-09-30 2016-01-27 成都华为技术有限公司 一种对象存储方法和装置
CN105739924A (zh) * 2016-01-29 2016-07-06 华为技术有限公司 基于缓存集群的缓存方法和系统
CN106603692A (zh) * 2016-12-27 2017-04-26 中国银联股份有限公司 一种分布式存储系统中的数据存储方法及装置
US9645761B1 (en) * 2016-01-28 2017-05-09 Weka.IO Ltd. Congestion mitigation in a multi-tiered distributed storage system
CN106873902A (zh) * 2015-12-11 2017-06-20 杭州华为数字技术有限公司 一种文件存储系统、数据调度方法及数据节点

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105450588B (zh) * 2014-07-31 2019-02-12 华为技术有限公司 一种基于rdma的数据传输方法及rdma网卡
CN106569729A (zh) * 2015-10-09 2017-04-19 阿里巴巴集团控股有限公司 用于分布式系统中数据写入的方法和设备

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567505A (zh) * 2011-12-26 2012-07-11 中兴通讯股份有限公司 一种分布式数据库及其数据操作方法
CN103514173A (zh) * 2012-06-20 2014-01-15 华为技术有限公司 数据处理的方法和节点设备
CN104125303A (zh) * 2014-08-12 2014-10-29 北京奇虎科技有限公司 数据读写请求方法、客户端及系统
CN104135539A (zh) * 2014-08-15 2014-11-05 华为技术有限公司 数据存储方法、sdn控制器和分布式网络存储系统
CN105095013A (zh) * 2015-06-04 2015-11-25 华为技术有限公司 数据存储方法、恢复方法、相关装置以及系统
CN105278877A (zh) * 2015-09-30 2016-01-27 成都华为技术有限公司 一种对象存储方法和装置
CN105160039A (zh) * 2015-10-13 2015-12-16 四川携创信息技术服务有限公司 一种基于大数据的查询方法
CN106873902A (zh) * 2015-12-11 2017-06-20 杭州华为数字技术有限公司 一种文件存储系统、数据调度方法及数据节点
US9645761B1 (en) * 2016-01-28 2017-05-09 Weka.IO Ltd. Congestion mitigation in a multi-tiered distributed storage system
CN105739924A (zh) * 2016-01-29 2016-07-06 华为技术有限公司 基于缓存集群的缓存方法和系统
CN106603692A (zh) * 2016-12-27 2017-04-26 中国银联股份有限公司 一种分布式存储系统中的数据存储方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张均宝: "《未来就绪的系统架构》", 31 August 2015 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111813334A (zh) * 2020-06-04 2020-10-23 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN111813334B (zh) * 2020-06-04 2024-04-05 中国科学院上海微系统与信息技术研究所 一种Ceph的写性能优化和双控节点组合方法
CN114489464A (zh) * 2020-10-27 2022-05-13 北京金山云网络技术有限公司 数据写入方法、装置和电子设备
CN113297324A (zh) * 2021-04-13 2021-08-24 福建天泉教育科技有限公司 一种数据写入的优化方法及终端
CN113297324B (zh) * 2021-04-13 2023-05-23 福建天泉教育科技有限公司 一种数据写入的优化方法及终端

Also Published As

Publication number Publication date
WO2019000423A1 (zh) 2019-01-03

Similar Documents

Publication Publication Date Title
US11099769B1 (en) Copying data without accessing the data
EP3414661B1 (en) Efficient live-migration of remotely accessed data
US11550819B2 (en) Synchronization cache seeding
US20180321846A1 (en) Method and storage array for procesing a write data request
US9507720B2 (en) Block storage-based data processing methods, apparatus, and systems
CN110337633A (zh) 一种数据存储方法及设备
US20190199794A1 (en) Efficient replication of changes to a byte-addressable persistent memory over a network
WO2017167056A1 (zh) 一种虚拟机的数据存储方法和装置
CA2920004C (en) Data deduplication method and storage array
CN113110916B (zh) 一种虚拟机数据读写方法、装置、设备及介质
US11184418B2 (en) Stream processing utilizing virtual processing agents
US8090907B2 (en) Method for migration of synchronous remote copy service to a virtualization appliance
US20210397374A1 (en) Function processing using storage controllers for load sharing
CN108475201A (zh) 一种虚拟机启动过程中的数据获取方法和云计算系统
AU2015402888A1 (en) Computer device and method for reading/writing data by computer device
CN109889561A (zh) 一种数据处理方法及装置
US10564847B1 (en) Data movement bulk copy operation
CN105574008B (zh) 应用于分布式文件系统的任务调度方法和设备
US10733118B2 (en) Computer system, communication device, and storage control method with DMA transfer of data
KR20190112020A (ko) 데이터 처리
JP2014174597A (ja) インメモリ型分散データベース、データ分散方法及びプログラム
US8352960B2 (en) Limiting receipt of unsolicited events by a logical partition in a data storage system
US10324660B2 (en) Determining whether to compress data prior to storage thereof
US10101940B1 (en) Data retrieval system and method
US20170192690A1 (en) Method, electronic device and computer program product for data processing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination