CN107436848A - 一种实现用户数据和压缩数据间转换的方法及装置 - Google Patents
一种实现用户数据和压缩数据间转换的方法及装置 Download PDFInfo
- Publication number
- CN107436848A CN107436848A CN201710655828.4A CN201710655828A CN107436848A CN 107436848 A CN107436848 A CN 107436848A CN 201710655828 A CN201710655828 A CN 201710655828A CN 107436848 A CN107436848 A CN 107436848A
- Authority
- CN
- China
- Prior art keywords
- data
- index
- compressed
- virtual space
- space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000013507 mapping Methods 0.000 claims abstract description 37
- 238000007906 compression Methods 0.000 claims abstract description 24
- 238000006243 chemical reaction Methods 0.000 claims abstract description 23
- 230000006835 compression Effects 0.000 claims abstract description 21
- 230000004044 response Effects 0.000 claims description 9
- 230000003862 health status Effects 0.000 claims description 4
- 238000000638 solvent extraction Methods 0.000 claims description 4
- 238000007726 management method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/40—Specific encoding of data in memory or cache
- G06F2212/401—Compressed data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明公开了一种实现用户数据和压缩数据间转换的方法,包括:对压缩对象划分虚拟空间和物理空间;根据所述压缩对象的虚拟空间对应的主索引查找段索引;根据所述段索引查找由虚拟空间划分的段;根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;根据所述映射关系模型实现对用户数据和压缩数据间的转换。因此,利用本发明所提供的方法,在使用过程中,可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
Description
技术领域
本发明涉及数据实时压缩领域,特别是涉及一种实现用户数据和压缩数据间转换的方法及装置。
背景技术
随着科学技术的发展,移动互联网和大数据概念的迅速崛起,越来越多的数据充斥在我们生活中,因此对于如何管理这些数据就显得尤为重要。
近年来,常见的一种管理数据的方式为对数据进行压缩管理,压缩是一种通过特定的算法来减小计算机文件大小的机制。这种机制是一种很方便的发明,尤其是对网络用户,因为它可以减小文件的字节总数,使文件能够通过较慢的互联网连接实现更快传输,此外还可以减少文件的磁盘占用空间。这种操作的方式可以让需要存储的数据,例如图像、视频等占用容量大的多媒体数据在无损或少量损失的情况下占用更少的内存,方便对大量数据的管理。
现有的压缩方式为先将数据写入存储设备,然后再使用压缩工具对数据进行压缩,之后再将压缩前的数据删除,使用压缩数据的时候需要先解压,再使用,这种方式效率低下,无法有效地对压缩前后的数据进行转换,缺少对数据合理的管理,占用大量的系统资源,耗费使用者大量的时间。
因此,如何提供一种有效解决在进行压缩数据的过程中,对数据的进行转换,以便合理管理的方法是本领域技术人员亟待解决的技术问题。
发明内容
本发明的目的是提供一种实现用户数据和压缩数据间转换的方法及装置,以解决在对数据压缩过程中,无法有效的对数据进行转换从而管理的问题。
为解决上述技术问题,本发明提供一种实现用户数据和压缩数据间转换的方法,包括:
对压缩对象划分虚拟空间和物理空间;
根据所述压缩对象的虚拟空间对应的主索引查找段索引;
根据所述段索引查找由虚拟空间划分的段;
根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;
根据所述映射关系模型实现对用户数据和压缩数据间的转换。
其中,在根据所述段的可写块地址映射到物理空间之前,该方法进一步包括:
响应用户对所述段的大小进行配置的配置指令,对所述段的大小进行配置。
其中,所述物理空间为固定大小的块。
其中,所述主索引的储存信息还包括:
储存压缩对象的健康状态和/或空闲块。
其中,所述根据所述压缩对象的虚拟空间相应的主索引查找段索引为:
响应根据日志地图追踪写入的数据并在所述段索引中进行记录的指令,根据日志地图追踪写入的数据并在所述段索引中进行记录。
本发明还提供一种实现用户数据和压缩数据间转换的装置,包括:
空间划分模块:用于对压缩对象划分虚拟空间和物理空间;
第一索引模块:用于根据所述压缩对象的虚拟空间相应的主索引查找段索引;
第二索引模块:用于根据所述段索引查找由虚拟空间划分的段;
映射建立模块:用于根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;
转换实现模块:用于根据所述映射关系模型实现对用户数据和压缩数据间的转换。
其中,所述装置进一步包括:
配置段模块:用于响应用户对所述段的大小进行配置的指令,对所述段的大小进行配置。
其中,所述物理空间为固定大小的块。
其中,所述主索引的储存信息还包括:
储存压缩对象的健康状态和/或空闲块。
其中,所述根据所述压缩对象的虚拟空间相应的主索引查找段索引为:
响应根据日志地图追踪写入的数据并在所述段索引中进行记录的指令,根据日志地图追踪写入的数据并在所述段索引中进行记录。
相对于上述背景技术,本发明所提供的一种实现用户数据和压缩数据间转换的方法,包括:对压缩对象划分虚拟空间和物理空间;根据所述压缩对象的虚拟空间对应的主索引查找段索引;根据所述段索引查找由虚拟空间划分的段;根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;根据所述映射关系模型实现对用户数据和压缩数据间的转换。
本发明实施例的优点在于基于实时压缩的方法,首先对压缩对象划分不同的虚拟空间和物理空间,在根据压缩对象相应的主索引查找段索引,再根据段索引查找段,最后根据段中的可写块地址映射到物理空间,从而建立虚拟空间到物理空间的映射关系模型实现对用户数据和压缩数据间的转换。在另一种优选地实施例中,使用过程中,在物理空间被拆分为段时,还可以对段的大小进行配置,极大提高了实用性。
因此,利用本发明所提供的方法,在使用过程中,可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
附图说明
为了更清楚的说明本发明实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例第一具体实施方式流程图;
图2为CO与VS/PS关系示意图;
图3为VS空间按段划分示意图;
图4为本发明实施例第二具体实施方式流程图;
图5为本发明实施例第一种装置示意图;
图6为本发明实施例第二种装置示意图。
具体实施方式
本发明的核心是提供一种实现用户数据和压缩数据间转换的方法,以解决在对数据压缩过程中,无法有效的对数据进行转换从而管理的问题。
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等是用于区别不同的对象,而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可包括没有列出的步骤或单元。
本申请发明人经过研究发现,现有技术中,在对用户数据进行压缩处理的时候,采用的方法是先将用户数据写入存储设备,再进行压缩处理生成压缩数据,并将原始数据删除,这种方法无法对数据进行有效合理的管理,在压缩过程中,耗费了大量的系统资源,浪费大量的存储空间和存储成本,存储系统的性能不高。鉴于此,本申请发明人通过提供一种实现用户数据和压缩数据间转换的方法,有效解决对数据转换管理的问题。
实施例一:
请参考图1,为本发明实施例第一具体实施方式流程图,具体包括:
步骤101:对压缩对象划分虚拟空间和物理空间。
常见的压缩技术是先将数据写入存储设备,然后使用压缩工具进行压缩,再将原始数据删除,使用的时候再将压缩数据解压,这种方法使用广泛,但是效率低下,尤其耗费大量的系统资源。实时压缩是一种对数据先压缩再写入的技术,读取时直接读取压缩数据再解压后返回,整个压缩过程和解压缩过程对于用户来说都是透明的,相比传统方法减少了中间环节,降低了系统资源的消耗。
在该步骤中,首先定义一个压缩对象(CO),存储压缩后的对象,然后,定义一个虚拟空间(VS),表示CO的用户视图,其次,再定义一个物理空间(PS),表示CO的实际存储视图。利用实时压缩引擎将PS分割为固定大小的块,如图2所示,为CO与VS/PS关系示意图。
步骤102:根据所述压缩对象的虚拟空间对应的主索引查找段索引。
在该步骤中,为了查找段索引,压缩引擎还需要维护一个主索引(MI),以查找每个段的索引,根据压缩对象的虚拟空间相应的主索引查找段索引为:响应根据日志地图(logmap)追踪写入的数据(log)并在段索引中进行记录的指令,根据日志地图追踪写入的数据并在段索引中进行记录。
每个CO都有一个对应的MI,同时MI中也会存储CO的其他属性信息,比如CO的健康状态,空闲的Blocks等等。
步骤103:根据所述段索引查找由虚拟空间划分的段。
在该步骤中,对于用户侧来说,每次写入数据(log)都是写入VS,实时压缩引擎负责在内存中使用特殊的map追踪写入的数据,这些信息也会以索引的形式存储在磁盘上。每个CO的VS被拆分为相等大小的段(Segments),每个段默认大小为64MB,该大小是可以配置的。如图3所示为VS空间按段划分示意图。
步骤104:根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型。
每个段都有属于自己的索引(index),并且每个段分配有一个PS的可写块地址(Writable Block Address,简称WBA),所有的压缩数据按32KB分割为固定的块并依次追加写入到可写块地址之后,每次写入在段索引中都会有对应的一个记录。
步骤105:根据所述映射关系模型实现对用户数据和压缩数据间的转换。
在该步骤中,通过对压缩对象划分对应的VS和PS,利用CO对应的主索引MI,查找段索引SI,再根据SI查找段,最后根据段里的WBA映射到物理空间PS,建立从VS到PS的映射关系模型,再通过VS到PS的映射关系模型建立用户数据到压缩数据间的映射关系模型,实现两种数据间的转换。
由此可见,利用本发明所提供的方法,在使用过程中,可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
实施例二:
参考图4,为本发明实施例第二具体实施方式流程图,具体包括:
步骤401:对压缩对象划分虚拟空间和物理空间。
步骤402:根据所述压缩对象的虚拟空间对应的主索引查找段索引。
步骤403:根据所述段索引查找由虚拟空间划分的段。
步骤404:响应用户对所述段的大小进行配置的配置指令,对所述段的大小进行配置。
在该步骤中,用户可以对段的大小进行配置,选择合适的段的大小。例如,在默认中段的大小为64MB,用户除了在选择64MB之外,可以另外选择其他数值的段大小,系统在接收用户对段大小的配置。
步骤405:根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型。
步骤406:根据所述映射关系模型实现对用户数据和压缩数据间的转换。
由此可见,利用本发明所提供的方法,在使用过程中,不仅可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,还可以对段的大小进行配置,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
相应地,本发明实施例还提供了一种实现用户数据和压缩数据间转换的装置,下面对本发明实施例提供的一种实现用户数据和压缩数据间转换的装置进行介绍,下文描述的装置与上文描述的一种实现用户数据和压缩数据间转换的方法可相互对应参照。
实施例三:
请参考图5,为本发明实施例第一种装置示意图,具体包括:
空间划分模块501:用于对压缩对象划分虚拟空间和物理空间。
首先定义一个压缩对象(CO),存储压缩后的对象,然后,定义一个虚拟空间(VS),表示CO的用户视图,其次,再定义一个物理空间(PS),表示CO的实际存储视图。实时压缩引擎将PS分割为固定大小的块,如图2所示,为CO与VS/PS关系示意图。
第一索引模块502:用于根据所述压缩对象的虚拟空间相应的主索引查找段索引。
为了查找段索引,压缩引擎还需要维护一个主索引(MI),以查找每个段的索引,根据压缩对象的虚拟空间相应的主索引查找段索引为:响应根据日志地图(log map)追踪写入的数据(log)并在段索引中进行记录的指令,根据日志地图追踪写入的数据并在段索引中进行记录。
第二索引模块503:用于根据所述段索引查找由虚拟空间划分的段。
对于用户侧来说,每次写入数据(log)都是写入VS,实时压缩引擎负责在内存中使用特殊的map追踪写入的数据,这些信息也会以索引的形式存储在磁盘上。每个CO的VS被拆分为相等大小的段(Segments),每个段默认大小为64MB,该大小是可以进行配置的。如图3所示为VS空间按段划分示意图。
映射建立模块504:用于根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型。
每个段都有属于自己的索引(index),并且每个段分配有一个PS的可写块地址(Writable Block Address,简称WBA),所有的压缩数据按32KB分割为固定的块并依次追加写入到可写块地址之后,每次写入在段索引中都会有对应的一个记录。
转换实现模块505:用于根据所述映射关系模型实现对用户数据和压缩数据间的转换。
通过对压缩对象划分对应的VS和PS,利用CO对应的主索引MI,查找段索引SI,再根据SI查找段,最后根据段里的WBA映射到物理空间PS,建立从VS到PS的映射关系模型,再通过VS到PS的映射关系模型建立用户数据到压缩数据间的映射关系模型,实现两种数据间的转换。
由此可见,利用本发明实施例所提供的装置,在使用过程中,可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
实施例四:
请参考图6,为本发明实施例第二种装置示意图,具体包括:
空间划分模块601:用于对压缩对象划分虚拟空间和物理空间。
第一索引模块602:用于根据所述压缩对象的虚拟空间相应的主索引查找段索引。
第二索引模块603:用于根据所述段索引查找由虚拟空间划分的段。
配置段模块604:用于响应用户对所述段的大小进行配置的配置指令,对所述段的大小进行配置。
用户可以对段的大小进行配置,选择合适的段的大小。例如,在默认中段的大小为64MB,用户除了在选择64MB之外,可以另外选择其他数值的段大小,系统在接收用户对段大小的配置。
映射建立模块605:用于根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型。
转换实现模块606:用于根据所述映射关系模型实现对用户数据和压缩数据间的转换。
由此可见,利用本发明实施例所提供的装置,在使用过程中,不仅可以基于实时压缩引擎建立从用户数据到压缩数据的映射关系模型,还可以对段的大小进行配置,实现对数据的转换,合理管理数据,提高存储系统的性能,降低存储空间和存储成本,有效节约了系统资源的消耗。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的一种实现用户数据和压缩数据间转换的方法以及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (10)
1.一种实现用户数据和压缩数据间转换的方法,其特征在于,包括:
对压缩对象划分虚拟空间和物理空间;
根据所述压缩对象的虚拟空间对应的主索引查找段索引;
根据所述段索引查找由虚拟空间划分的段;
根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;
根据所述映射关系模型实现对用户数据和压缩数据间的转换。
2.如权利要求1所述的方法,其特征在于,在根据所述段的可写块地址映射到物理空间之前,该方法进一步包括:
响应用户对所述段的大小进行配置的配置指令,对所述段的大小进行配置。
3.如权利要求2所述的方法,其特征在于,所述物理空间为固定大小的块。
4.如权利要求3所述的方法,其特征在于,所述主索引的储存信息还包括:
储存压缩对象的健康状态和/或空闲块。
5.如权利要求1-4任一项所述的方法,其特征在于,所述根据所述压缩对象的虚拟空间对应的主索引查找段索引为:
响应根据日志地图追踪写入的数据并在所述段索引中进行记录的指令,根据日志地图追踪写入的数据并在所述段索引中进行记录。
6.一种实现用户数据和压缩数据间转换的装置,其特征在于,包括:
空间划分模块:用于对压缩对象划分虚拟空间和物理空间;
第一索引模块:用于根据所述压缩对象的虚拟空间相应的主索引查找段索引;
第二索引模块:用于根据所述段索引查找由虚拟空间划分的段;
映射建立模块:用于根据所述段的可写块地址映射到物理空间,建立虚拟空间到物理空间的映射关系模型;
转换实现模块:用于根据所述映射关系模型实现对用户数据和压缩数据间的转换。
7.如权利要求6所述的装置,其特征在于,所述装置进一步包括:
配置段模块:用于响应用户对所述段的大小进行配置的指令,对所述段的大小进行配置。
8.如权利要求7所述的装置,其特征在于,所述物理空间为固定大小的块。
9.如权利要求8所述的装置,其特征在于,所述主索引的储存信息还包括:
储存压缩对象的健康状态和/或空闲块。
10.如权利要求6-9任一项所述的装置,其特征在于,所述第一索引模块根据所述压缩对象的虚拟空间对应的主索引查找段索引包括:
响应根据日志地图追踪写入的数据并在所述段索引中进行记录的指令,根据日志地图追踪写入的数据并在所述段索引中进行记录。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710655828.4A CN107436848B (zh) | 2017-08-03 | 2017-08-03 | 一种实现用户数据和压缩数据间转换的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710655828.4A CN107436848B (zh) | 2017-08-03 | 2017-08-03 | 一种实现用户数据和压缩数据间转换的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107436848A true CN107436848A (zh) | 2017-12-05 |
CN107436848B CN107436848B (zh) | 2021-02-02 |
Family
ID=60459947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710655828.4A Active CN107436848B (zh) | 2017-08-03 | 2017-08-03 | 一种实现用户数据和压缩数据间转换的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107436848B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109683825A (zh) * | 2018-12-24 | 2019-04-26 | 广东浪潮大数据研究有限公司 | 一种存储系统在线数据压缩方法、装置及设备 |
WO2021000263A1 (en) * | 2019-07-02 | 2021-01-07 | Microsoft Technology Licensing, Llc | Hardware-based memory compression |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6137428A (en) * | 1999-04-27 | 2000-10-24 | Unisys Corporation | Data compression method and apparatus with embedded run-length encoding using mathematical run processing |
CN1425986A (zh) * | 2003-01-17 | 2003-06-25 | 清华大学 | 自动压缩/解压缩文件系统及其压缩算法 |
CN101894115A (zh) * | 2009-05-18 | 2010-11-24 | 北京大学 | 电子文档的图像数据处理方法及其装置 |
CN101916228A (zh) * | 2010-08-17 | 2010-12-15 | 中国人民解放军国防科学技术大学 | 带有数据压缩功能的闪存转换层及实现方法 |
CN102841907A (zh) * | 2011-06-24 | 2012-12-26 | 环达电脑(上海)有限公司 | 数据压缩和解压缩的处理方法 |
CN104765574A (zh) * | 2015-04-23 | 2015-07-08 | 成都博元时代软件有限公司 | 数据云端存储方法 |
-
2017
- 2017-08-03 CN CN201710655828.4A patent/CN107436848B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6137428A (en) * | 1999-04-27 | 2000-10-24 | Unisys Corporation | Data compression method and apparatus with embedded run-length encoding using mathematical run processing |
CN1425986A (zh) * | 2003-01-17 | 2003-06-25 | 清华大学 | 自动压缩/解压缩文件系统及其压缩算法 |
CN101894115A (zh) * | 2009-05-18 | 2010-11-24 | 北京大学 | 电子文档的图像数据处理方法及其装置 |
CN101916228A (zh) * | 2010-08-17 | 2010-12-15 | 中国人民解放军国防科学技术大学 | 带有数据压缩功能的闪存转换层及实现方法 |
CN102841907A (zh) * | 2011-06-24 | 2012-12-26 | 环达电脑(上海)有限公司 | 数据压缩和解压缩的处理方法 |
CN104765574A (zh) * | 2015-04-23 | 2015-07-08 | 成都博元时代软件有限公司 | 数据云端存储方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109683825A (zh) * | 2018-12-24 | 2019-04-26 | 广东浪潮大数据研究有限公司 | 一种存储系统在线数据压缩方法、装置及设备 |
CN109683825B (zh) * | 2018-12-24 | 2022-05-24 | 广东浪潮大数据研究有限公司 | 一种存储系统在线数据压缩方法、装置及设备 |
WO2021000263A1 (en) * | 2019-07-02 | 2021-01-07 | Microsoft Technology Licensing, Llc | Hardware-based memory compression |
Also Published As
Publication number | Publication date |
---|---|
CN107436848B (zh) | 2021-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104462141B (zh) | 一种数据存储与查询的方法、系统及存储引擎装置 | |
CN103488709B (zh) | 一种索引建立方法及系统、检索方法及系统 | |
CN110377226B (zh) | 基于存储引擎bluestore的压缩方法、装置及存储介质 | |
CN107947799A (zh) | 一种数据压缩方法及装置 | |
CN103995855A (zh) | 存储数据的方法和装置 | |
CN104065906A (zh) | 数字录像设备的录像方法及装置 | |
CN108763531A (zh) | 一种mdvr文件存储系统及其运行方法 | |
CN102880615A (zh) | 一种数据存储方法和装置 | |
CN109994131A (zh) | 一种基于索引的工频录波文件压缩存储方法及系统 | |
CN106569750A (zh) | 一种数据压缩方法及装置 | |
CN107436848A (zh) | 一种实现用户数据和压缩数据间转换的方法及装置 | |
CN109814809A (zh) | 数据压缩方法及装置 | |
TWI397060B (zh) | 物件導向儲存裝置之磁碟配置方法 | |
CN106681659A (zh) | 数据压缩的方法及装置 | |
CN104239231A (zh) | 一种加速二级缓存预热的方法及装置 | |
CN109634528A (zh) | 一种目标数据的落盘方法、装置、设备及存储介质 | |
CN111813709B (zh) | 一种基于fpga存算一体架构的高速并行存储方法 | |
CN110399371A (zh) | 基于Redis数据库的减少内存消耗的方法、存储介质及设备 | |
CN103257928B (zh) | 闪存设备数据管理方法和系统 | |
US20030097523A1 (en) | External storage device within a computer network | |
US20230179226A1 (en) | Waveform file processing method, storage medium, and device | |
CN113778345B (zh) | 索引的创建方法、计算设备及存储介质 | |
CN112597102B (zh) | 一种高效的镜像文件系统实现方法 | |
CN114003169B (zh) | 一种用于ssd的数据压缩方法 | |
CN113467997B (zh) | 一种数据恢复方法、装置、移动设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210105 Address after: Building 9, No.1, guanpu Road, Guoxiang street, Wuzhong Economic Development Zone, Wuzhong District, Suzhou City, Jiangsu Province Applicant after: SUZHOU LANGCHAO INTELLIGENT TECHNOLOGY Co.,Ltd. Address before: Room 1601, floor 16, 278 Xinyi Road, Zhengdong New District, Zhengzhou City, Henan Province Applicant before: ZHENGZHOU YUNHAI INFORMATION TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |