CN107247562A - 一种压缩优化方法及其装置 - Google Patents

Abstract

本发明公开了一种压缩优化方法及其装置，包括压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；本发明采用优化释放算法释放被重写的数据占用的存储空间。能够及时释放被重写后的数据所占用的存储区域，减少无用数据的积累，提高存储空间利用率高。

Description

一种压缩优化方法及其装置

技术领域

本发明涉及数据压缩技术领域，特别是涉及一种压缩优化方法及其装置。

背景技术

在大数据时代，压缩技术能够大大的节省实际存储空间，降低产品的成本。压缩技术对于用户来说使用广泛，如zip以及gzip等工具的使用。

但是，由于用户经常会对压缩后的数据进行重写，而目前的方法中，由于重写后会导致数据进行重新压缩，而重新压缩后的数据与上次压缩后的数据大小往往会发生改变，这种情况下即导致了无用数据占用的存储空间越来越多，造成压缩空间浪费，存储空间的利用率低。

因此，如何提供一种存储空间利用率高的压缩优化方法及其装置是本领域技术人员目前需要解决的问题。

发明内容

本发明的目的是提供一种压缩优化方法及其装置，能够及时释放被重写后的数据所占用的存储区域，减少无用数据的积累，提高存储空间利用率高。

为解决上述技术问题，本发明提供了一种压缩优化方法，包括：

压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

采用优化释放算法释放所述被重写的数据占用的存储空间。

优选地，所述压缩待压缩数据的过程具体为：

在待压缩数据写入过程中，每隔预设时间段，则将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

优选地，所述采用优化释放算法释放被重写的数据占用的存储空间的过程包括：

检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，则释放该存储块。

为解决上述技术问题，本发明还提供了一种压缩优化装置，包括：

压缩模块，用于压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

重写模块，用于对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

释放模块，用于采用优化释放算法释放被重写的数据占用的存储空间。

优选地，所述压缩模块具体包括：

计时单元，用于在待压缩数据写入过程中，每隔预设时间段，触发一次实时压缩单元；

实时压缩单元，用于将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

优选地，所述释放模块包括：

存储块检查单元，用于检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，触发存储块释放单元；

所述存储块释放单元，用于释放相应存储块。

本发明提供了一种压缩优化方法及其装置，将压缩后的数据存放至固定大小的存储块中，压缩数据重写后，将重写后的新数据写入新存储空间内，而被重写的旧数据进行标记，之后采用预设的优化释放算法释放掉被重写的数据占用的存储空间。本发明通过将压缩数据的存储区域划分为固定大小的存储块，方便了后续对被重写的数据所占用的存储空间的释放，且本发明通过数据的释放操作，避免了大量无用数据的积累，减少了压缩空间的浪费，提高了存储空间利用率高。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明提供的一种压缩优化方法的过程的流程图；

图2为本发明提供的另一种压缩优化方法的过程的流程图；

图3为本发明提供的一种压缩优化装置的结构示意图。

具体实施方式

本发明的核心是提供一种压缩优化方法及其装置，能够及时释放被重写后的数据所占用的存储区域，减少无用数据的积累，提高存储空间利用率高。

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明提供了一种压缩优化方法，参见图1所示，图1为本发明提供的一种压缩优化方法的过程的流程图；该方法包括：

步骤s1：压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

步骤s2：对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

步骤s3：采用优化释放算法释放被重写的数据占用的存储空间。

具体的，步骤s1中压缩待压缩数据的过程具体为：

在待压缩数据写入过程中，每隔预设时间段，则将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

可以理解的是，上述压缩方式可以理解为实时压缩，即压缩窗口由传统的滑动窗口变为时间为轴的窗口，数据持续写入的过程中，每个预设时间段，则将该段连续时间段内输入的数据进行压缩，这种方式相比目前数据全部写入后，再将其按照数据大小进行划分然后压缩的方式，首先压缩时间短，另外，也方便了将数据压缩至各个固定大小的存储块内。

作为优选地，步骤s3的过程包括：

检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，则释放该存储块。

可以理解的是，通过划分存储块，可以使得连续输入的数据一般会存储与同一个或相邻的存储块中，因此在进行数据重写时，被重写的数据一般会处于同一个或相邻的存储块中，这样只要控制存储块的大小，即能够使得在经过几次数据重写后，比较容易达到一个或几个存储块内的数据均被重写过，进而释放，这些存储块，达到减少无用数据的目的。而若压缩后的数据存储的空间并未划分为同等大小的存储块，则在对其进行释放操作时，所需的算法要比目前的算法复杂的多，且容易误删除其他未被重写的数据。

进一步的，还可以将每个存储块分为多个存储页，每个存储页内存储的数据较少，这样一旦一个存储页内的数据全部被重写，即仅释放该存储页。这种方式能够进一步减少无用数据占用的空间大小，提高存储空间的利用率。

当然，这里的优化释放算法的目的是为了释放无用数据占用的存储空间，其具体算法内容本发明不作限定。

参见图2所示，图2为本发明提供的另一种压缩优化方法的过程的流程图。

本发明提供了一种压缩优化方法，将压缩后的数据存放至固定大小的存储块中，压缩数据重写后，将重写后的新数据写入新存储空间内，而被重写的旧数据进行标记，之后采用预设的优化释放算法释放掉被重写的数据占用的存储空间。本发明通过将压缩数据的存储区域划分为固定大小的存储块，方便了后续对被重写的数据所占用的存储空间的释放，且本发明通过数据的释放操作，避免了大量无用数据的积累，减少了压缩空间的浪费，提高了存储空间利用率高。

本发明还提供了一种压缩优化装置，参见图3所示，图3为本发明提供的一种压缩优化装置的结构示意图。该装置包括：

压缩模块1，用于压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

重写模块2，用于对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

释放模块3，用于采用优化释放算法释放被重写的数据占用的存储空间。

其中，压缩模块1具体包括：

计时单元，用于在待压缩数据写入过程中，每隔预设时间段，触发一次实时压缩单元；

实时压缩单元，用于将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

另外，释放模块3包括：

存储块检查单元，用于检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，触发存储块释放单元；

存储块释放单元，用于释放相应存储块。

本发明提供了一种压缩优化装置，将压缩后的数据存放至固定大小的存储块中，压缩数据重写后，将重写后的新数据写入新存储空间内，而被重写的旧数据进行标记，之后采用预设的优化释放算法释放掉被重写的数据占用的存储空间。本发明通过将压缩数据的存储区域划分为固定大小的存储块，方便了后续对被重写的数据所占用的存储空间的释放，且本发明通过数据的释放操作，避免了大量无用数据的积累，减少了压缩空间的浪费，提高了存储空间利用率高。

需要说明的是，在本说明书中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其他实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种压缩优化方法，其特征在于，包括：

压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

采用优化释放算法释放所述被重写的数据占用的存储空间。

2.根据权利要求1所述的方法，其特征在于，所述压缩待压缩数据的过程具体为：

在待压缩数据写入过程中，每隔预设时间段，则将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

3.根据权利要求1或2所述的方法，其特征在于，所述采用优化释放算法释放被重写的数据占用的存储空间的过程包括：

检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，则释放该存储块。

4.一种压缩优化装置，其特征在于，包括：

压缩模块，用于压缩待压缩数据，并将压缩后的数据依次存储至固定大小的存储块中；

重写模块，用于对压缩后的数据进行数据重写后，为重写后的新数据分配空闲存储空间进行存储，并标记被重写的数据；

释放模块，用于采用优化释放算法释放被重写的数据占用的存储空间。

5.根据权利要求4所述的装置，其特征在于，所述压缩模块具体包括：

计时单元，用于在待压缩数据写入过程中，每隔预设时间段，触发一次实时压缩单元；

实时压缩单元，用于将该预设时间段内接收到的待压缩数据进行压缩，并存储至相应的存储块中。

6.根据权利要求4或5所述的装置，其特征在于，所述释放模块包括：

存储块检查单元，用于检查被重写过的存储块中被重写过的部分所占的比例，若存在被完全重写的存储块，触发存储块释放单元；

所述存储块释放单元，用于释放相应存储块。