CN110968271A - 一种高性能数据存储方法、系统与装置 - Google Patents
一种高性能数据存储方法、系统与装置 Download PDFInfo
- Publication number
- CN110968271A CN110968271A CN201911164000.4A CN201911164000A CN110968271A CN 110968271 A CN110968271 A CN 110968271A CN 201911164000 A CN201911164000 A CN 201911164000A CN 110968271 A CN110968271 A CN 110968271A
- Authority
- CN
- China
- Prior art keywords
- data
- ssd
- cpu
- disk array
- cache
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000013500 data storage Methods 0.000 title claims abstract description 25
- 238000013403 standard screening design Methods 0.000 claims abstract description 98
- 230000008569 process Effects 0.000 claims abstract description 32
- 238000005516 engineering process Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 239000012634 fragment Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0689—Disk arrays, e.g. RAID, JBOD
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
- G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/062—Securing storage systems
- G06F3/0622—Securing storage systems in relation to access
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Memory System Of A Hierarchy Structure (AREA)
Abstract
本发明公开了一种高性能数据存储方法、系统与装置,方法包括:数据写入流程和数据读取流程;数据写入流程包括:IO接口将数据写请求发给CPU,CPU分别将数据写入内存、SSD和磁盘阵列;数据读取流程包括:IO接口将数据读请求发给CPU,CPU从内存、SSD或者磁盘阵列中读取数据返回IO接口。另外,本发明还公开与存储方法匹配的系统和装置的具体内容。本发明采用2个SSD组成RAID 1,数据有备份,写入速率为磁盘阵列速率+SSD速率,和传统技术比提升了数据可靠性,在提升速率的情况下,没有数据丢失风险。
Description
技术领域
本发明属于IT领域,具体涉及一种高性能数据存储方法、系统与装置。
背景技术
随着生活中的信息被转换为数字,就需要具备存储容量的容器对这些数字进行存储。数据以某种格式记录在计算机内部或外部存储介质上,比如常见的内容条、机械硬盘等。
目前的数据存储很难做到高性能存储,比如常见的存储技术包括:
存储技术1:在每个硬盘内加入几MB的读写缓存,将部分随机读写转换成顺序读写。缺陷:(1)缓存太小,只能将部分随机读写转换成顺序读写。(2)缓存在单个硬盘内,不是全局缓存,对磁盘阵列整体性能影响小。
存储技术2:采用具有备电功能的内存做磁盘阵列的全局缓存。缺陷:(1)需要内存备电装置。(2)内存内的数据无备份,内存发生故障数据就会丢失。(3)备电耗尽时内存内数据就会丢失。
存储技术3:采用SSD来组成磁盘阵列。缺陷:磁盘阵列内所有磁盘都采用SSD,成本高。
发明内容
本发明的目的在于克服现有技术的不足,提供一种高性能数据存储方法、系统与装置。
本发明的目的是通过以下技术方案来实现的:
一种高性能数据存储方法,包括:数据写入流程和数据读取流程;
数据写入流程包括:IO接口将数据写请求发给CPU,CPU分别将数据写入内存、SSD和磁盘阵列;
数据读取流程包括:IO接口将数据读请求发给CPU,CPU从内存、SSD或者磁盘阵列中读取数据返回IO接口。
作为优选方式,数据写入流程包括:
IO接口将数据写请求发给CPU,CPU先将数据接收到内存;
CPU将内存接受到的数据同时向SSD缓存和磁盘阵列顺序写;
CPU将数据写到SSD缓存或磁盘阵列后,向IO接口返回数据写入成功的指令。作为优选方式,数据读取流程包括:
IO接口将数据读请求发给CPU后,执行如下操作:
CPU查找内存内是否有缓存数据,如果有直接返回;
CPU查找SSD内是否有缓存数据,如果有直接返回;
CPU从磁盘阵列中读取数据返回IO接口。
作为优选方式,它还包括数据整理流程,数据整理流程包括CPU判断系统处于空闲状态,从磁盘阵列中将碎片文件读出写入SSD。系统空闲时,CPU将磁盘阵列内的文件碎片读出到SSD内,然后将这些文件顺序写入磁盘阵列,减少随机读发生概率。
作为优选方式,数据整理流程还包括CPU将写入SSD的碎片文件整理成大文件顺序写入磁盘阵列。
作为优选方式,采用两个SSD组成RAID1,作为数据全局写缓存;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。因为采用RAID1,数据1+1备份,单个SSD故障不会丢失数据。
一种高性能数据存储系统,包括IO接口、CPU和存储设备,存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;采用两个SSD组成RAID1,作为数据全局写缓存;因为采用RAID1,数据1+1备份,单个SSD故障不会丢失数据;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
作为优选方式,存储系统采用内存和SSD做为两级读缓存,所以数据读取速率=内存命中率*内存带宽+SSD命中率*SSD带宽+磁盘阵列带宽。
一种高性能数据存储装置,包括IO接口、CPU和存储设备,存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;非易失缓存采用2个SSD组成RAID1,作为数据全局写缓存;数据有备份,提升可靠性;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
作为优选方式,存储装置采用内存和SSD做为两级读缓存,所以数据读取速率=内存命中率*内存带宽+SSD命中率*SSD带宽+磁盘阵列带宽。
本发明的有益效果是:
1、非易失缓存采用2个SSD组成RAID 1,数据有备份,和传统技术比提升了数据可靠性,没有数据丢失风险。
2、数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。传统技术写入速率最大为磁盘阵列的写入速度,本发明一方面选择顺序写到磁盘阵列,提升了磁盘阵列写入速度,另一方面增加了SSD缓存同步写入,写入速率为磁盘阵列速率+SSD速率。
3、采用内存和SSD做为两级读缓存,所以数据读取速率=内存命中率*内存带宽+SSD命中率*SSD带宽+磁盘阵列带宽。传统采用内存做缓存,内存空间小,命中率低,速率为存命中率*内存带宽+磁盘阵列带宽。
4、传统技术如果自动优化磁盘数据存储结构有丢失数据的风险。本发明在系统空闲时,CPU将磁盘阵列内的文件碎片读出到SSD内,然后将这些文件顺序写入磁盘阵列,减少随机读发生概率。
附图说明
为了更清楚地说明本发明实施方式的技术方案,下面将对实施方式中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明存储系统的架构图;
图2为数据写入流程示意图;
图3为数据读取流程示意图;
图4为数据整理流程示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
为使本发明实施方式的目的、技术方案和优点更加清楚,下面将结合本发明实施方式中的附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式是本发明一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。因此,以下对在附图中提供的本发明的实施方式的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
实施例一
一种高性能数据存储方法,包括:数据写入流程和数据读取流程;
数据写入流程包括:IO接口将数据写请求发给CPU,CPU分别将数据写入内存、SSD和磁盘阵列;
数据读取流程包括:IO接口将数据读请求发给CPU,CPU从内存、SSD或者磁盘阵列中读取数据返回IO接口。
如图2所示,数据写入流程包括:
IO接口将数据写请求发给CPU,CPU先将数据接收到内存;
CPU将内存接受到的数据同时向SSD缓存和磁盘阵列顺序写;
CPU将数据写到SSD缓存或磁盘阵列后,向IO接口返回数据写入成功的指令。
如图3所示,数据读取流程包括:
IO接口将数据读请求发给CPU后,执行如下操作:
CPU查找内存内是否有缓存数据,如果有直接返回;
CPU查找SSD内是否有缓存数据,如果有直接返回;
CPU从磁盘阵列中读取数据返回IO接口。
如图4所示,本实施例还包括数据整理流程,数据整理流程包括CPU判断系统处于空闲状态,从磁盘阵列中将碎片文件读出写入SSD。系统空闲时,CPU将磁盘阵列内的文件碎片读出到SSD内,然后将这些文件顺序写入磁盘阵列,减少随机读发生概率,提升磁盘阵列读取速度。
数据整理流程还包括CPU将写入SSD的碎片文件整理成大文件顺序写入磁盘阵列。本实施例将大部分的随机读写都转化成了顺序读写,并且在读写时同步缓存,极大提高了磁盘阵列的读写速率。
本实施例采用两个SSD组成RAID1,作为数据全局写缓存;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。因为采用RAID1,数据1+1备份,单个SSD故障不会丢失数据。数据写入速率等于SSD+磁盘阵列顺序写的写入速率。
实施例二
如图1所示,一种高性能数据存储系统,包括IO接口、CPU和存储设备,存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;采用两个SSD组成RAID1,作为数据全局写缓存;因为采用RAID1,数据1+1备份,单个SSD故障不会丢失数据;因为SSD只是作为写缓存,所以SSD容量不需要太大,整个系统的存储容量主要由构成磁盘阵列的机械硬盘提供。
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
存储系统采用内存和SSD做为两级读缓存,所以数据读取速率=内存命中率*内存带宽+SSD命中率*SSD带宽+磁盘阵列带宽。
由于本实施例所介绍的系统为实施本发明实施例中一种高性能数据存储方法所采用的系统,故而本发明实施例中所介绍的方法,本领域所属技术人员能够了解本实施例的系统的具体实施方式以及各种变化形式,所以在此对于系统如何实现本发明实施例中的方法不再详细介绍。只要本领域所属技术人员实施本发明实施例中的方法所采用的系统,都属于本发明的保护范围。
实施例三
在实施例二的基础上,本发明将系统的各个部分整合以后,构成一种高性能数据存储装置,包括IO接口、CPU和存储设备,存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;非易失缓存采用2个SSD组成RAID 1,作为数据全局写缓存;数据有备份,提升可靠性;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
存储装置采用内存和SSD做为两级读缓存,所以数据读取速率=内存命中率*内存带宽+SSD命中率*SSD带宽+磁盘阵列带宽。
由于本实施例所介绍的装置为实施本发明实施例中一种高性能数据存储方法所采用的装置,故而本发明实施例中所介绍的方法,本领域所属技术人员能够了解本实施例的装置的具体实施方式以及各种变化形式,所以在此对于装置如何实现本发明实施例中的方法不再详细介绍。只要本领域所属技术人员实施本发明实施例中的方法所采用的设备,都属于本发明的保护范围。
本领域的所属技术人员清楚,本发明的实施例可以为方法、系统、或装置的产品。尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,应当指出的是,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种高性能数据存储方法,其特征在于,包括:数据写入流程和数据读取流程;
数据写入流程包括:IO接口将数据写请求发给CPU,CPU分别将数据写入内存、SSD和磁盘阵列;
数据读取流程包括:IO接口将数据读请求发给CPU,CPU从内存、SSD或者磁盘阵列中读取数据返回IO接口。
2.根据权利要求1所述的一种高性能数据存储方法,其特征在于:数据写入流程包括:
IO接口将数据写请求发给CPU,CPU先将数据接收到内存;
CPU将内存接受到的数据同时向SSD缓存和磁盘阵列顺序写;
CPU将数据写到SSD缓存或磁盘阵列后,向IO接口返回数据写入成功的指令。
3.根据权利要求1所述的一种高性能数据存储方法,其特征在于:数据读取流程包括:
IO接口将数据读请求发给CPU后,执行如下操作:
CPU查找内存内是否有缓存数据,如果有直接返回;
CPU查找SSD内是否有缓存数据,如果有直接返回;
CPU从磁盘阵列中读取数据返回IO接口。
4.根据权利要求1所述的一种高性能数据存储方法,其特征在于:它还包括数据整理流程,数据整理流程包括CPU判断系统处于空闲状态,从磁盘阵列中将碎片文件读出写入SSD。
5.根据权利要求4所述的一种高性能数据存储方法,其特征在于:数据整理流程还包括CPU将写入SSD的碎片文件整理成大文件顺序写入磁盘阵列。
6.根据权利要求1-5任一所述的一种高性能数据存储方法,其特征在于:采用两个SSD组成RAID1,作为数据全局写缓存;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
7.一种高性能数据存储系统,包括IO接口、CPU和存储设备,其特征在于:存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;采用两个SSD组成RAID1,作为数据全局写缓存;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
8.根据权利要求7所述的一种高性能数据存储系统,其特征在于:存储系统采用内存和SSD做为两级读缓存。
9.一种高性能数据存储装置,包括IO接口、CPU和存储设备,其特征在于:存储设备包括内存、磁盘阵列和SSD;CPU分别与IO接口、内存、磁盘阵列和SSD连接;非易失缓存采用2个SSD组成RAID 1,作为数据全局写缓存;
数据写入时CPU控制将顺序写数据直接写入磁盘阵列,随机写入数据则写入SSD缓存,SSD缓存带宽和磁盘阵列带宽共同承担写入的数据流。
10.根据权利要求9所述的一种高性能数据存储装置,其特征在于:存储装置采用内存和SSD做为两级读缓存。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911164000.4A CN110968271B (zh) | 2019-11-25 | 2019-11-25 | 一种高性能数据存储方法、系统与装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911164000.4A CN110968271B (zh) | 2019-11-25 | 2019-11-25 | 一种高性能数据存储方法、系统与装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110968271A true CN110968271A (zh) | 2020-04-07 |
CN110968271B CN110968271B (zh) | 2024-02-20 |
Family
ID=70031438
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911164000.4A Active CN110968271B (zh) | 2019-11-25 | 2019-11-25 | 一种高性能数据存储方法、系统与装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110968271B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115981570A (zh) * | 2023-01-10 | 2023-04-18 | 创云融达信息技术(天津)股份有限公司 | 一种基于kv数据库的分布式对象存储方法和系统 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1866162A (zh) * | 2004-06-10 | 2006-11-22 | 马维尔国际贸易有限公司 | 高速缓存层次结构 |
CN101458613A (zh) * | 2008-12-31 | 2009-06-17 | 成都市华为赛门铁克科技有限公司 | 一种混合分级阵列的实现方法、混合分级阵列和存储系统 |
CN102117248A (zh) * | 2011-03-09 | 2011-07-06 | 浪潮(北京)电子信息产业有限公司 | 一种缓存系统和在缓存系统中缓存数据的方法 |
CN102262511A (zh) * | 2011-06-14 | 2011-11-30 | 苏州市易德龙电器有限公司 | 用于raid的缓存管理系统及方法 |
CN102779098A (zh) * | 2012-06-14 | 2012-11-14 | 国家超级计算深圳中心(深圳云计算中心) | 混合缓存的协同式自适应预取方法、中间件和系统 |
CN102945207A (zh) * | 2012-10-26 | 2013-02-27 | 浪潮(北京)电子信息产业有限公司 | 一种块级数据的缓存管理方法及系统 |
KR101244001B1 (ko) * | 2012-07-02 | 2013-03-15 | 주식회사 태진인포텍 | 하이브리드 raid 저장 기반 시스템 아키텍쳐 및 이를 제공하는 방법 |
CN103038755A (zh) * | 2011-08-04 | 2013-04-10 | 华为技术有限公司 | 多节点系统中数据缓存的方法、装置及系统 |
CN103645859A (zh) * | 2013-11-19 | 2014-03-19 | 华中科技大学 | 一种虚拟ssd与ssd异构镜像的磁盘阵列缓存方法 |
US20140115228A1 (en) * | 2012-10-23 | 2014-04-24 | Vmware, Inc. | Method and system for vm-granular i/o caching |
CN104090852A (zh) * | 2014-07-03 | 2014-10-08 | 华为技术有限公司 | 管理混合缓存的方法及设备 |
JP2015055878A (ja) * | 2013-09-10 | 2015-03-23 | 日本電気株式会社 | キャッシュ制御装置及びキャッシュの制御方法、ディスクアレイ装置及びそのコントローラ、並びにコンピュータ・プログラム |
CN104794070A (zh) * | 2015-04-23 | 2015-07-22 | 南京道熵信息技术有限公司 | 基于动态非覆盖raid技术的固态闪存写缓存系统及方法 |
CN105138292A (zh) * | 2015-09-07 | 2015-12-09 | 四川神琥科技有限公司 | 磁盘数据读取方法 |
CN106980471A (zh) * | 2017-03-27 | 2017-07-25 | 联想(北京)有限公司 | 一种提高智能设备的硬盘写入性能的方法及装置 |
US20170286362A1 (en) * | 2016-04-05 | 2017-10-05 | E8 Storage Systems Ltd. | Write cache and write-hole recovery in distributed raid over shared multi-queue storage devices |
CN107678894A (zh) * | 2017-08-31 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种内存测试方法、装置及系统 |
CN108572792A (zh) * | 2017-06-13 | 2018-09-25 | 北京金山云网络技术有限公司 | 数据存储方法、装置、电子设备及计算机可读存储介质 |
CN109144411A (zh) * | 2018-07-24 | 2019-01-04 | 中国电子科技集团公司第三十八研究所 | 数据中心混合磁盘阵列及其数据动态迁移策略 |
-
2019
- 2019-11-25 CN CN201911164000.4A patent/CN110968271B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1866162A (zh) * | 2004-06-10 | 2006-11-22 | 马维尔国际贸易有限公司 | 高速缓存层次结构 |
CN101458613A (zh) * | 2008-12-31 | 2009-06-17 | 成都市华为赛门铁克科技有限公司 | 一种混合分级阵列的实现方法、混合分级阵列和存储系统 |
CN102117248A (zh) * | 2011-03-09 | 2011-07-06 | 浪潮(北京)电子信息产业有限公司 | 一种缓存系统和在缓存系统中缓存数据的方法 |
CN102262511A (zh) * | 2011-06-14 | 2011-11-30 | 苏州市易德龙电器有限公司 | 用于raid的缓存管理系统及方法 |
CN103038755A (zh) * | 2011-08-04 | 2013-04-10 | 华为技术有限公司 | 多节点系统中数据缓存的方法、装置及系统 |
CN102779098A (zh) * | 2012-06-14 | 2012-11-14 | 国家超级计算深圳中心(深圳云计算中心) | 混合缓存的协同式自适应预取方法、中间件和系统 |
KR101244001B1 (ko) * | 2012-07-02 | 2013-03-15 | 주식회사 태진인포텍 | 하이브리드 raid 저장 기반 시스템 아키텍쳐 및 이를 제공하는 방법 |
US20140115228A1 (en) * | 2012-10-23 | 2014-04-24 | Vmware, Inc. | Method and system for vm-granular i/o caching |
CN102945207A (zh) * | 2012-10-26 | 2013-02-27 | 浪潮(北京)电子信息产业有限公司 | 一种块级数据的缓存管理方法及系统 |
JP2015055878A (ja) * | 2013-09-10 | 2015-03-23 | 日本電気株式会社 | キャッシュ制御装置及びキャッシュの制御方法、ディスクアレイ装置及びそのコントローラ、並びにコンピュータ・プログラム |
CN103645859A (zh) * | 2013-11-19 | 2014-03-19 | 华中科技大学 | 一种虚拟ssd与ssd异构镜像的磁盘阵列缓存方法 |
CN104090852A (zh) * | 2014-07-03 | 2014-10-08 | 华为技术有限公司 | 管理混合缓存的方法及设备 |
CN104794070A (zh) * | 2015-04-23 | 2015-07-22 | 南京道熵信息技术有限公司 | 基于动态非覆盖raid技术的固态闪存写缓存系统及方法 |
CN105138292A (zh) * | 2015-09-07 | 2015-12-09 | 四川神琥科技有限公司 | 磁盘数据读取方法 |
US20170286362A1 (en) * | 2016-04-05 | 2017-10-05 | E8 Storage Systems Ltd. | Write cache and write-hole recovery in distributed raid over shared multi-queue storage devices |
CN106980471A (zh) * | 2017-03-27 | 2017-07-25 | 联想(北京)有限公司 | 一种提高智能设备的硬盘写入性能的方法及装置 |
CN108572792A (zh) * | 2017-06-13 | 2018-09-25 | 北京金山云网络技术有限公司 | 数据存储方法、装置、电子设备及计算机可读存储介质 |
CN107678894A (zh) * | 2017-08-31 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种内存测试方法、装置及系统 |
CN109144411A (zh) * | 2018-07-24 | 2019-01-04 | 中国电子科技集团公司第三十八研究所 | 数据中心混合磁盘阵列及其数据动态迁移策略 |
Non-Patent Citations (2)
Title |
---|
李元章;孙志卓;马忠梅;郑军;谭毓安;: "S-RAID5:一种适用于顺序数据访问的节能磁盘阵列", 计算机学报, no. 06 * |
陈志广;肖侬;刘芳;杜溢墨;: "一种用磁盘备份SSD的高性能可靠存储系统", 计算机研究与发展, no. 01 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115981570A (zh) * | 2023-01-10 | 2023-04-18 | 创云融达信息技术(天津)股份有限公司 | 一种基于kv数据库的分布式对象存储方法和系统 |
CN115981570B (zh) * | 2023-01-10 | 2023-12-29 | 创云融达信息技术(天津)股份有限公司 | 一种基于kv数据库的分布式对象存储方法和系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110968271B (zh) | 2024-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10289544B2 (en) | Mapping tables for storage devices | |
KR101702201B1 (ko) | 솔리드 스테이트 드라이브(ssd)에 대한 최적화된 컨텍스트 드롭 | |
CN108431783B (zh) | 访问请求处理方法、装置及计算机系统 | |
US8661190B2 (en) | Flash memory device and data access method thereof | |
CN106445405B (zh) | 一种面向闪存存储的数据访问方法及其装置 | |
CN111400083B (zh) | 数据存储方法及系统、存储介质 | |
CN102945207A (zh) | 一种块级数据的缓存管理方法及系统 | |
CN108959589B (zh) | 基于stt-mram加速固态存储器件日志文件保存恢复的方法 | |
CN113821171B (zh) | 一种基于哈希表与lsm树的键值存储方法 | |
CN112799595B (zh) | 数据处理方法、设备及存储介质 | |
CN105786410A (zh) | 一种提高数据存储系统处理速度的方法及数据存储系统 | |
CN111124258B (zh) | 全闪存阵列的数据存储方法、装置、设备及可读存储介质 | |
CN109388341A (zh) | 一种基于Device Mapper的系统存储优化方法 | |
WO2017113211A1 (zh) | 访问请求处理方法、装置及计算机系统 | |
CN106469119B (zh) | 一种基于nvdimm的数据写缓存方法及其装置 | |
CN113377690A (zh) | 一种适应不同大小的用户请求的固态硬盘处理方法 | |
CN110968271B (zh) | 一种高性能数据存储方法、系统与装置 | |
CN105138277A (zh) | 一种固态盘阵列的缓存管理方法 | |
CN112947869A (zh) | 固态硬盘及写操作方法 | |
CN202615266U (zh) | 基于固态硬盘的计算机系统 | |
CN101794246A (zh) | 备份存储系统、备份系统及数据备份方法和恢复方法 | |
CN101526887B (zh) | 将数据写入硬盘的方法、装置及系统 | |
CN113204536A (zh) | 一种用于分布式存储系统读写优化方法及装置 | |
CN117707437B (zh) | 基于分布式存储系统的虚拟磁盘存储方法及装置 | |
US11487664B1 (en) | Performing data reduction during host data ingest |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |