CN102147768B - 存储器、固态缓存系统及缓存数据处理方法 - Google Patents
存储器、固态缓存系统及缓存数据处理方法 Download PDFInfo
- Publication number
- CN102147768B CN102147768B CN201010614591.3A CN201010614591A CN102147768B CN 102147768 B CN102147768 B CN 102147768B CN 201010614591 A CN201010614591 A CN 201010614591A CN 102147768 B CN102147768 B CN 102147768B
- Authority
- CN
- China
- Prior art keywords
- solid
- data
- state
- memory
- buffer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000015654 memory Effects 0.000 title claims abstract description 159
- 238000003672 processing method Methods 0.000 title claims abstract description 22
- 239000007787 solid Substances 0.000 title abstract description 19
- 239000000872 buffer Substances 0.000 claims description 149
- 238000007906 compression Methods 0.000 claims description 36
- 230000006835 compression Effects 0.000 claims description 36
- 230000006798 recombination Effects 0.000 claims description 16
- 238000005215 recombination Methods 0.000 claims description 16
- 238000000034 method Methods 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 9
- 238000013144 data compression Methods 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000013179 statistical model Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000009418 renovation Methods 0.000 description 1
- 239000012536 storage buffer Substances 0.000 description 1
Images
Landscapes
- Memory System Of A Hierarchy Structure (AREA)
Abstract
本发明公开一种存储器、固态缓存系统和缓存数据处理方法。该存储器包括存储控制器，主存储器，在所述存储控制器和所述主存储器之间对数据进行缓存的固态缓存系统；所述固态缓存系统包括至少一以固态存储器作为缓存器的固态缓存器；固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作。其最大幅度在存储系统中利用固态存储的优异性能。
Description
技术领域
本发明涉及一种数据存储技术领域，特别是涉及一种利用固态存储作为缓存的存储器、数据缓存的固态缓存系统及缓存数据的数据处理方法。
背景技术
随着计算机存储技术的发展，由于传统的存储设备通过机械转动存储，无法突破机械系统的性能瓶颈，使得传统的存储设备的性能无法获得提高，进而影响到整个计算机的性能。
固态存储器(Solid State Disk，SSD)是摒弃传统的磁介质，采用电子存储介质进行数据存储和读取的一种技术。由于突破了传统机械硬盘的性能瓶颈，因而拥有极高的存储性能，在一些军用系统、高性能计算研究领域有突出的应用表现，被认为是下一代存储行业的技术革新，具有在存储行业领域内开拓新格局的潜力。
固态存储包括基于RAM介质(内存介质)的固态存储和基于Flash介质的固态存储。
但由于对固态存储技术的稳定性的顾虑，以及缺乏对固态存储系统的体系、包括硬件、软件和应用方面的研究，固态存储技术的应用一直处于相对简单的阶段，大多数情况下，固态存储系统(如固态硬盘)被作为传统硬盘的直接高性能替代品，在这种情况下对固态存储系统的不当使用，造成了性能，可靠性方面的问题，使得固态存储的潜能无法完全发挥。
近年来，各大传统存储厂家，开始对固态存储技术进行研究并推出应用固态存储的系统，如Oracle和Sun Microsystems合作的Exadata系统，其是一种基于闪存(Flash)的固态存储技术，透明化、动态化把经常访问的数据移到固态存储上，解决了数据库访问的瓶颈。Dataram 2009年推出的XcelaSAN存储优化器，采用固态硬盘做块层(BlockLevel)动态缓存。
中国专利申请200610107496.8公开一种混合式存储设备，具有两个存储区域，即盘和非易失性固态存储器。该盘和存储器各自具有盘高速缓存区域、系统区域、以及用户区域。如果从主机设备传输数据，则对于第一超簇，将数据写入到可以高速存取的非易失性固态存储器的高速缓存区域内。在如此写入数据时，将头移动到规定位置。将头移动到该位置之后到达的任何数据被写入到高速缓存区域内。
这些系统都是采用少量固态存储，以传统硬盘为主的混合存储系统(Hybrid StorageSystem)。这种分层的存储系统架构，在提高性能的同时，也较好地控制了成本。
然而，现有技术也显示出固态存储技术的应用还处于初级阶段，缺乏关键技术，大大限制了当前固态存储技术应用的深度和广度。具体表现在：
1)对固态存储的写操作没有很好实现优化。写操作的问题主要在于写放大(Writeamplification)和块(Block)的不均衡磨损的问题，尤其是在频繁写小量数据的情况下。
2)由于没有好的固态存储系统技术，固态存储的稳定性成为现有固态存储系统的很大的弱点。现有技术的方案是通过使用写寿命较长的基于单级存储单元(SLC)闪存的固态存储来减轻这个问题，或是通过大量使用NVRAM多一层缓存。这样做，不仅不能根本解决固态存储系统的稳定性问题，也造成成本提高，严重影响了产品的性价比。
发明内容
本发明的目的在于提供一种存储器、固态缓存系统和缓存数据处理方法。其最大幅度在存储系统中利用固态存储的优异性能。
为实现本发明目的而提供的一种存储器，包括存储控制器，主存储器，还包括在所述存储控制器和所述主存储器之间对数据进行缓存的固态缓存系统；
所述固态缓存系统包括至少一以固态存储器作为缓存器的固态缓存器；
固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作。
较优地，所述固态缓存系统还包括统计模块，压缩模块，重组模块和刷新模块，其中：
所述统计模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器缓存频率列表进行统计；
所述压缩模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器的缓存的数据块数据进行压缩；
所述重组模块，用于将所述固态缓存器的缓存数据重组到边界对齐；
所述刷新模块，用于对元数据进行刷新；
所述重组模块对所述压缩模块压缩后的数据或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作；
在所述重组模块对所述压缩模块的压缩数据进行重组的过程中，所述刷新模块对对元数据进行刷新。
为实现在发明目的还提供一种固态缓存系统，包括至少一以固态存储器作为缓存器的固态缓存器；
所述固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作。。
为实现本发明目的，更进一步地，还提供一种固态存储的缓存数据处理方法，包括存储控制器对主存储器读写数据时，利用固态缓存系统进行缓存的步骤；
所述固态缓存系统包括至少一以固态存储器作为缓存器的固态缓存器；
该固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作。
较优地，所述使用环型架构作为写缓存架构，其写缓存的写入方式是完全顺序的，即当一块数据写入一个新版本时，顺序写入一个新的版本，并在元数据内标识以前的版本失效。
较优地，所述对缓存的数据块和相应的元数据进行读写操作，包括如下步骤：
步骤S1，在固态缓存器中未写入数据块，或者固态缓存器中的数据已经读出并写入到主存储器时，将数据块存储位置相应的元数据的数据块存储标记标志为无效；
步骤S2，在向固态缓存器中写入新数据块时，查找固态缓存器的新存储位置，判断相应的新存储位置的元数据的数据块存储标记是否为无效；
步骤S3，如果否，即数据块存储标记为有效，则转到步骤S2查找另一新的存储位置；否则，即数据块存储标记为无效，则进入步骤S4；
步骤S4，将新数据块写入相应的新存储位置，并将新数据块存储位置相应的元数据的数据块存储标记改写为有效；
步骤S5，遍历整个环型架构，对比判断新数据块数据和固态缓存器中所述数据块中的所有相应数据块存储标记为有效的原存储数据是否相同；
步骤S6，如果有固态缓存器中原存储数据与新数据块数据相同，则将新数据块的相应数据块存储标记改写为无效，返回步骤S2；否则，进入步骤S7；
步骤S7，遍历整个环型架构，查找是否存在数据块存储标记为无效，如果有，则返回步骤S2；否则，进入步骤S8；
步骤S8，将固态缓存器中的数据按环型架构写入主存储器，在每一数据块数据写入主存储器成功后，将相应的数据块存储标记改写为无效；
步骤S9，在固态缓存器中全部数据块数据写入到主存储器后，返回步骤S2，进行下一次读写缓存。
较优地，所述固态存储的缓存数据处理方法，还包括对固态缓存器的缓存频率列表进行统计的步骤；
对固态缓存器的缓存数据进行压缩的步骤；
对压缩或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作的步骤；
在对压缩数据进行重组的过程中，对元数据进行刷新的步骤。
较优地，所述压缩处理为利用冗余性化简的方法，通过LZO算法进行数据压缩。
本发明的有益效果是：本发明的存储器、固态缓存系统和缓存数据处理方法，其利用固态存储作为存储的写操作缓存，最大幅度在存储器中利用固态存储的优异性能。
附图说明
图1是本发明存储器结构示意图；
图2是本发明固态缓存系统结构示意图；
图3是本发明固态缓存系统的环型架构示意图；
图4是本发明缓存数据处理方法示意图；
图5是图4中对缓存的数据块和相应的元数据进行读写操作的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明的存储器、固态缓存系统和缓存数据处理方法进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，作为一种可实施方式，为本发明实施例的存储器1，包括存储控制器2，主存储器4，以及在存储控制器2和主存储器4之间对数据进行缓存的固态缓存系统3，如图2所示，所述固态缓存系统3包括至少一以固态存储器作为缓存器的固态缓存器31。
存储控制器2对主存储器4读写(I/O)数据时，在和主存储器4之间，首先利用固态缓存系统3进行缓存读写，本发明实施例的固态缓存系统3利用以至少一个固态存储器组成的固态缓存器31进行缓存，其性能优势将大幅度提高系统的性能。
本发明的固态缓存系统3，根据固态存储的特性中写操作以顺序写为主，数据更新使用在不同位置的重写(Out-of-place Write)的特点，如图3所示，使用环型架构(RingBuffer)作为写缓存的架构，对缓存的数据块和相应的元数据(Meta Data)进行读写操作。
作为一种可实施方式，本发明的固态缓存系统3，所述使用环型架构作为写缓存架构，其写缓存的写入方式是完全顺序的，即当一块数据写入一个新版本时，并不覆盖以前的版本，而是顺序写入一个新的版本，并在元数据内标识以前的版本失效。
所述元数据是描写固态缓存器31缓存的数据对应最终写入主存储器4的数据的映射的现状的数据。
这样，由于固态缓存系统写缓存的环型架构，当数据回转一圈，需要被清除，为以后写的数据让开空间，如果需要清除的数据是一个已经失效的旧版本，就不需要写到固态缓存器上，而可以直接清除，在同时如果读缓存中有同样数据，也同时需要被标识为无效。如此这样使对固态缓存器31的访问最小化。
写缓存的顺序写是为了提高对固态缓存器31的写操作的性能，并提高固态缓存器31的使用寿命，通过的方式是减少固态缓存器的写操作中的拷贝操作。
较佳地，所述固态缓存系统3还包括统计模块32，用于在对缓存的数据块和相应的元数据(Meta Data)进行读写操作时，对固态缓存器31缓存频率列表进行统计。
本发明扩充和发展现有的缓存技术，根据固态存储的特性的考虑，对固态缓存器31缓存频率(Frequency)列表的统计。
作为一种可实施方式，本发明的统计模块32，利用2个以上的位(Bit)来存储固态缓存器31的缓存频率，并对缓存频率列表进行统计。
缓存列表统计有多种方式，作为一种可实施方式，本发明利用2个以上的位(Bit)来存储固态缓存器31的缓存频率，并对缓存频率列表进行统计，将缓存频率高的数据优先写入磁盘。从而可以顾及固态存储的特性，更能提高固态存储的性能和可靠性，提高缓存的击中率(Hit Rate)，从而减少固态存储缓存的写操作的数据量和次数，提高缓存的性能和固态存储的使用寿命。
进一步地，本发明的固态缓存系统还包括压缩模块33，用于在对缓存的数据块和相应的元数据(Meta Data)进行读写操作时，对固态缓存器31的缓存的数据块数据进行压缩。
为了减少对固态缓存器写的次数和数据量，压缩模块33对固态缓存器31的缓存的数据块数据进行实时压缩，较佳地，本发明的压缩模块33，根据不同数据载荷的压缩效率和速度，动态地满足固态缓存在不同数据载荷下动态压缩。
更佳地，进一步地，作为一种可实施方式，本发明的压缩模块33，利用冗余性化简(Redundancy Reduction)方法对数据进行压缩处理。
较佳地，作为一种可实施方式，本发明压缩模块33使用LZO算法进行数据压缩。
LZO算法属于字典基础模式的无失真压缩算法，字典基础模式的无失真压缩算法，是采用跟统计模式完全不同的方式来进行数据压缩，这种类型的算法并非利用不同长度的位元数来代表每一个字符，也不需要预先估计每一个字符出现的概率，而是对于不同长度的字符串都统一采用一种记号来表示，而这种记号就类似字典内的索引。
更进一步地，本发明的固态缓存系统还包括重组模块34，用于将固态缓存器31的缓存数据重组到边界对齐。
由于对固态缓存器31的固态存储随机小量数据的写操作，会造成写放大，会使固态缓存器的寿命降低等严重的问题，因此，如图3所示，本发明重组模块34将压缩后的固态缓存器31的缓存数据重组到边界对齐，然后才进行顺序写操作。
基于固态存储的特性，数据写操作如果是顺序操作，而且在数据块的开始和结束和块(block)或其他固态存储系统要求的数据块大小的边界都对齐，将对固态存储具有很好的写操作性能，能够延长存储系统的寿命。然而，由于存储系统写入数据块大小不定，尤其经过压缩模块33压缩以后，数据块的大小就更无法预测，因此，本发明重组模块34对压缩模块33压缩后(或未压缩的)数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作。
更佳地，本发明的固态缓存系统还包括刷新模块35，用于对元数据进行刷新。
在重组模块34对压缩模块33的压缩数据进行重组的过程中，刷新模块35对对元数据进行刷新，以反映数据的重组，从而可以恢复数据。
相应地，如图4所示，本发明还提供一种固态存储的缓存数据处理方法，其包括存储控制器2对主存储器4读写(I/O)数据时，利用固态缓存系统3进行缓存的步骤。
所述固态缓存系统3包括至少一以固态存储器作为缓存器的固态缓存器31。
该固态缓存系统3使用环型架构(Ring Buffer)作为写缓存的架构，对缓存的数据块和相应的元数据(Meta Data)进行读写操作。
较佳地，作为一种可实施方式，所述使用环型架构作为写缓存架构，其写缓存的写入方式是完全顺序的，即当一块数据写入一个新版本时，并不覆盖以前的版本，而是顺序写入一个新的版本，并在元数据内标识以前的版本失效。
较佳地，作为一种可实施方式，所述对缓存的数据块和相应的元数据进行读写操作，如图5所示，包括如下步骤：
步骤S1，在固态缓存器31中未写入数据块，或者固态缓存器31中的数据已经读出并写入到主存储器4时，将数据块存储位置相应的元数据的数据块存储标记标志为无效(Invalid)；
步骤S2，在向固态缓存器31中写入新数据块时，查找固态缓存器31的新存储位置，判断相应的新存储位置的元数据的数据块存储标记是否为无效；
步骤S3，如果否，即数据块存储标记为有效，则转到步骤S2查找另一新的存储位置；否则，即数据块存储标记为无效，则进入步骤S4；
步骤S4，将新数据块写入相应的新存储位置，并将新数据块存储位置相应的元数据的数据块存储标记改写为有效(Valid)；
步骤S5，遍历整个环型架构，对比判断新数据块数据和固态缓存器31中所述数据块中的所有相应数据块存储标记为有效(Valid)的原存储数据是否相同；
步骤S6，如果有固态缓存器31中原存储数据与新数据块数据相同，则将新数据块的相应数据块存储标记改写为无效(invalid)，返回步骤S2；否则，进入步骤S7；
步骤S7，遍历整个环型架构，查找是否存在数据块存储标记为无效(invalid)，如果有，则返回步骤S2；否则，进入步骤S8；
步骤S8，将固态缓存器31中的数据按环型架构写入主存储器4，在每一数据块数据写入主存储器成功后，将相应的数据块存储标记改写为无效(invalid)；
步骤S9，在固态缓存器31中全部数据块数据(即全部缓存数据)写入到主存储器后，返回步骤S2，进行下一次读写缓存。
通过利用环型架构，对元数据进行写操作，有效地结合固态缓存器31的特点，保证了缓存读写的效率。
较佳地，本发明的固态存储的缓存数据处理方法，还包括对固态缓存器的缓存频率列表进行统计的步骤。
作为一种可实施方式，本发明的固态存储的缓存数据处理方法，利用2个以上的位(Bit)来存储固态缓存器的缓存频率，并对缓存频率列表进行统计。
进一步地，本发明的固态存储的缓存数据处理方法，还包括在对缓存的数据块和相应的元数据(Meta Data)进行读写操作时，对固态缓存器的缓存的数据块数据进行压缩的步骤。
作为一种可实施方式，本发明的缓存数据处理方法，利用冗余性化简(RedundancyReduction)方法对固态缓存器的缓存数据进行压缩处理。
作为一种可实施方式，本发明的压缩处理，使用LZO算法进行数据压缩。
LZO算法它属于字典基础模式的无失真压缩算法。字典基础模式的无失真压缩算法，是采用跟统计模式完全不同的方式来进行数据压缩，这种类型的算法并非利用不同长度的位元数来代表每一个字符，也不需要预先估计每一个字符出现的概率，而是对于不同长度的字符串都统一采用一种记号来表示，而这种记号就类似字典内的索引。
更进一步地，本发明的固态存储的缓存数据处理方法，还包括对压缩或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作的步骤。
更佳地，本发明的固态存储的缓存数据处理方法，还包括在对压缩数据进行重组的过程中，对元数据进行刷新的步骤。
本发明实施例的数据处理方法和固态缓存系统，利用固态存储作为存储系统的写操作缓存，最大幅度在存储系统中利用固态存储的优异性能。
最后应当说明的是，很显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型。
Claims (7)
1.一种存储器，包括存储控制器，主存储器，其特征在于，还包括在所述存储控制器和所述主存储器之间对数据进行缓存的固态缓存系统；
所述固态缓存系统包括至少一以固态存储器作为缓存器的固态缓存器；
固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作；
还包括统计模块，压缩模块，重组模块和刷新模块，其中：
所述统计模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器缓存频率列表进行统计；
所述压缩模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器的缓存的数据块数据进行压缩；
所述重组模块，用于将所述固态缓存器的缓存数据重组到边界对齐；
所述刷新模块，用于对元数据进行刷新；
所述重组模块对所述压缩模块压缩后的数据或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作；
在所述重组模块对所述压缩模块的压缩数据进行重组的过程中，所述刷新模块对对元数据进行刷新。
2.一种固态缓存系统，其特征在于，包括至少一以固态存储器作为缓存器的固态缓存器；
所述固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作；
还包括统计模块，压缩模块，重组模块和刷新模块，其中：
所述统计模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器缓存频率列表进行统计；
所述压缩模块，用于在对缓存的数据块和相应的元数据进行读写操作时，对所述固态缓存器的缓存数据进行压缩；
所述重组模块，用于将所述固态缓存器的缓存数据重组到边界对齐；
所述刷新模块，用于对元数据进行刷新；
所述重组模块对所述压缩模块压缩后的数据或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作；
在所述重组模块对所述压缩模块的压缩数据进行重组的过程中，所述刷新模块对对元数据进行刷新。
3.根据权利要求2所述的固态缓存系统，其特征在于，所述压缩为利用冗余性化简的方法，通过LZO算法进行数据压缩。
4.一种固态存储的缓存数据处理方法，其特征在于，包括存储控制器对主存储器读写数据时，利用固态缓存系统进行缓存的步骤；
所述固态缓存系统包括至少一以固态存储器作为缓存器的固态缓存器；
该固态缓存系统使用环型架构作为写缓存的架构，对缓存的数据块和相应的元数据进行读写操作；
所述对缓存的数据块和相应的元数据进行读写操作，包括如下步骤：
步骤S1，在固态缓存器中未写入数据块，或者固态缓存器中的数据已经读出并写入到主存储器时，将数据块存储位置相应的元数据的数据块存储标记标志为无效;
步骤S2，在向固态缓存器中写入新数据块时，查找固态缓存器的新存储位置，判断相应的新存储位置的元数据的数据块存储标记是否为无效；
步骤S3，如果否，即数据块存储标记为有效，则转到步骤S2查找另一新的存储位置；否则，即数据块存储标记为无效，则进入步骤S4；
步骤S4，将新数据块写入相应的新存储位置，并将新数据块存储位置相应的元数据的数据块存储标记改写为有效;
步骤S5，遍历整个环型架构，对比判断新数据块数据和固态缓存器中所述数据块中的所有相应数据块存储标记为有效的原存储数据是否相同；
步骤S6，如果有固态缓存器中原存储数据与新数据块数据相同，则将新数据块的相应数据块存储标记改写为无效，返回步骤S2；否则，进入步骤S7；
步骤S7，遍历整个环型架构，查找是否存在数据块存储标记为无效，如果有，则返回步骤S2；否则，进入步骤S8；
步骤S8，将固态缓存器中的数据按环型架构写入主存储器，在每一数据块数据写入主存储器成功后，将相应的数据块存储标记改写为无效；
步骤S9，在固态缓存器中全部数据块数据写入到主存储器后，返回步骤S2，进行下一次读写缓存。
5.根据权利要求4所述的固态存储的缓存数据处理方法，其特征在于，所述使用环型架构作为写缓存架构，其写缓存的写入方式是完全顺序的，即当一块数据写入一个新版本时，顺序写入一个新的版本，并在元数据内标识以前的版本失效。
6.根据权利要求4或5所述的固态存储的缓存数据处理方法，其特征在于，还包括对固态缓存器的缓存频率列表进行统计的步骤；
对固态缓存器的缓存数据进行压缩的步骤；
对压缩或未压缩的数据进行重组，将缓存数据重组到边界对齐，在每次积累到一个数据块时，再进行写操作的步骤；
在对压缩数据进行重组的过程中，对对元数据进行刷新的步骤。
7.根据权利要求6所述的固态存储的缓存数据处理方法，其特征在于，所述压缩处理为利用冗余性化简的方法，通过LZO算法进行数据压缩。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201010614591.3A CN102147768B (zh) | 2010-05-21 | 2010-12-30 | 存储器、固态缓存系统及缓存数据处理方法 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201010179173.6 | 2010-05-21 | ||
| CN201010179173 | 2010-05-21 | ||
| CN201010614591.3A CN102147768B (zh) | 2010-05-21 | 2010-12-30 | 存储器、固态缓存系统及缓存数据处理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102147768A CN102147768A (zh) | 2011-08-10 |
| CN102147768B true CN102147768B (zh) | 2014-03-05 |
Family
ID=44422040
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201010614591.3A Active CN102147768B (zh) | 2010-05-21 | 2010-12-30 | 存储器、固态缓存系统及缓存数据处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102147768B (zh) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102541757B (zh) * | 2011-11-30 | 2014-11-05 | 华为技术有限公司 | 写缓存方法、缓存同步方法和装置 |
| US10565099B2 (en) * | 2012-12-28 | 2020-02-18 | Apple Inc. | Methods and apparatus for compressed and compacted virtual memory |
| CN104111899A (zh) * | 2014-07-03 | 2014-10-22 | 北京思特奇信息技术股份有限公司 | 一种缓存数据的存储方法及系统及读取方法 |
| CN104461935B (zh) * | 2014-11-27 | 2018-03-13 | 华为技术有限公司 | 一种进行数据存储的方法、装置及系统 |
| CN104461936B (zh) * | 2014-11-28 | 2017-10-17 | 华为技术有限公司 | 缓存数据的刷盘方法及装置 |
| CN105446659B (zh) * | 2015-11-11 | 2019-12-24 | 暨南大学 | 一种通过压缩磁盘板载缓存以提高磁盘性能的方法 |
| KR102525229B1 (ko) * | 2016-05-13 | 2023-04-25 | 에스케이하이닉스 주식회사 | 메모리 모듈 및 이를 포함하는 시스템 |
| CN107817946B (zh) * | 2016-09-13 | 2021-06-04 | 阿里巴巴集团控股有限公司 | 用于混合存储设备读写数据的方法以及装置 |
| CN109842905B (zh) * | 2017-11-28 | 2021-08-06 | 中国移动通信有限公司研究院 | 字典配置方法、网络侧设备及用户终端 |
| CN110018792B (zh) * | 2019-04-10 | 2020-05-29 | 苏州浪潮智能科技有限公司 | 一种待落盘数据处理方法、装置、电子设备及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1945537A (zh) * | 2006-07-27 | 2007-04-11 | 清华大学 | 基于存储区域网络的高速固态存储设备的实现方法 |
| CN101334707A (zh) * | 2008-06-25 | 2008-12-31 | 哈尔滨工业大学 | 与主机并行工作的智能固态海量存储器 |
| CN101478462A (zh) * | 2008-12-17 | 2009-07-08 | 成都市华为赛门铁克科技有限公司 | 存储数据读取和写入的装置和方法及固态硬盘 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8112580B2 (en) * | 2009-01-19 | 2012-02-07 | Hitachi Global Storage Technologies Netherlands B.V. | Disk drive having multiple disk surfaces accessible by a read/write head and nonvolatile memory for continuous data transfer |
-
2010
- 2010-12-30 CN CN201010614591.3A patent/CN102147768B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1945537A (zh) * | 2006-07-27 | 2007-04-11 | 清华大学 | 基于存储区域网络的高速固态存储设备的实现方法 |
| CN101334707A (zh) * | 2008-06-25 | 2008-12-31 | 哈尔滨工业大学 | 与主机并行工作的智能固态海量存储器 |
| CN101478462A (zh) * | 2008-12-17 | 2009-07-08 | 成都市华为赛门铁克科技有限公司 | 存储数据读取和写入的装置和方法及固态硬盘 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102147768A (zh) | 2011-08-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102147768B (zh) | 存储器、固态缓存系统及缓存数据处理方法 | |
| CN101916228B (zh) | 带有数据压缩功能的闪存转换层及实现方法 | |
| CN104461393B (zh) | 一种闪存存储器的混合映射方法 | |
| CN103049222B (zh) | 一种raid5的写io优化处理方法 | |
| CN101604226B (zh) | 一种基于虚拟raid构建动态缓存池提高存储系统性能的方法 | |
| CN102364474B (zh) | 用于机群文件系统的元数据存储系统和管理方法 | |
| CN102521269B (zh) | 一种基于索引的计算机连续数据保护方法 | |
| CN105574104B (zh) | 一种基于ObjectStore的LogStructure存储系统及其数据写入方法 | |
| CN105930097B (zh) | 一种消除局部并行中小写操作的分布校验式磁盘阵列 | |
| CN104050103B (zh) | 一种用于数据恢复的缓存替换方法与系统 | |
| CN107589908A (zh) | 一种基于固态盘缓存系统中非对齐更新数据的合并方法 | |
| CN106503051A (zh) | 一种基于元数据分类的贪婪预取型数据恢复系统及恢复方法 | |
| CN104714903A (zh) | 存储系统 | |
| CN109739696B (zh) | 一种双控存储阵列固态硬盘缓存加速方法 | |
| CN103823640B (zh) | 一种Flash存储器的高效率存储方法 | |
| CN106055679A (zh) | 一种多层次缓存感知型索引方法 | |
| CN103019959A (zh) | 一种指令高速缓冲存储器 | |
| CN106776361A (zh) | 一种面向大规模非易失性存储介质的缓存方法和系统 | |
| CN105930099B (zh) | 一种消除局部并行中小写操作的双盘容错盘阵列 | |
| CN107329909A (zh) | 一种数据管理方法及装置 | |
| CN110083487A (zh) | 一种基于数据局部性的引用数据块碎片消除方法及系统 | |
| CN102508790B (zh) | 一种应用于内容解析存储的基于内容的缓存方法 | |
| CN110659305B (zh) | 基于非易失存储系统的高性能关系型数据库服务系统 | |
| CN111443874A (zh) | 基于内容感知的固态盘内存缓存管理方法、设备及固态盘 | |
| CN101807212B (zh) | 嵌入式文件系统的缓存方法及嵌入式文件系统的缓存装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| ASS | Succession or assignment of patent right |
Owner name: SUZHOU AOKECHUANG INFORMATION TECHNOLOGY CO., LTD. Free format text: FORMER OWNER: SUZHOU EJITEC CO., LTD. Effective date: 20150623 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20150623 Address after: Xinghu Street Industrial Park of Suzhou city in Jiangsu province 215000 room A4-506 No. 218 Patentee after: SUZHOU ACQUITRONIX INFORMATION TECHNOLOGY CO., LTD. Address before: Suzhou City, Jiangsu Province, Suzhou Industrial Park 215021 Xinghu Street No. 218 nano garden building A4 room 505 Patentee before: Suzhou Ejitec Co., Ltd. |
|
| CB03 | Change of inventor or designer information |
Inventor after: Wu Huaqiang Inventor after: Gao Bin Inventor after: Pang Yachuan Inventor after: Qian He Inventor before: Yang Yue Inventor before: Liu Hongyue Inventor before: Wang Xuguang |
|
| CB03 | Change of inventor or designer information | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20170727 Address after: 100084 Beijing City, Haidian District Tsinghua Yuan Patentee after: Tsinghua University Address before: Xinghu Street Industrial Park of Suzhou city in Jiangsu province 215000 room A4-506 No. 218 Patentee before: SUZHOU ACQUITRONIX INFORMATION TECHNOLOGY CO., LTD. |