CN109558088A - 一种压缩方法、系统、设备及计算机可读存储介质 - Google Patents

一种压缩方法、系统、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN109558088A
CN109558088A CN201811463468.9A CN201811463468A CN109558088A CN 109558088 A CN109558088 A CN 109558088A CN 201811463468 A CN201811463468 A CN 201811463468A CN 109558088 A CN109558088 A CN 109558088A
Authority
CN
China
Prior art keywords
stored
data
compressed
compression ratio
compression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811463468.9A
Other languages
English (en)
Other versions
CN109558088B (zh
Inventor
亓国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201811463468.9A priority Critical patent/CN109558088B/zh
Publication of CN109558088A publication Critical patent/CN109558088A/zh
Application granted granted Critical
Publication of CN109558088B publication Critical patent/CN109558088B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本申请公开了一种压缩方法、系统、设备及计算机可读存储介质，该方法包括：在当前判断周期内，获取存储设备中已压缩的数据的压缩率；基于压缩率判断是否对新接收的待存储数据进行压缩；若是，则对待存储数据进行压缩并存储；若否，则直接将待存储数据进行存储。本申请公开的一种压缩方法，根据已压缩数据的压缩率来判断是否对待存储数据进行压缩，从而使得存储设备可以降低因压缩数据所带来的负载压力，降低出现IO阻塞的风险，提高存储设备的IOPS，提高存储设备的性能。本申请公开的一种压缩系统、设备及计算机可读存储介质也解决了相应技术问题。

Description

一种压缩方法、系统、设备及计算机可读存储介质
技术领域
本申请涉及存储技术领域，更具体地说，涉及一种压缩方法、系统、设备及计算机可读存储介质。
背景技术
在存储领域中，待存储数据多种多样，对存储设备高负载、低时延的要求也越来越高。为了节省存储设备的空间，在存储待存储数据时，会对待存储数据进行压缩。
然而，在对待存储数据进行压缩的过程中，压缩待存储数据会增加CPU的负载，而待存储数据是以IO进程进行存储的，所以对待存储数据进行压缩时有时会阻塞IO，影响设备的IOPS(Input/Output Operations Per Second，每秒进行读写操作的次数)，使得存储设备的性能降低。
综上所述，如何提高存储设备的性能是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种压缩方法，其能在一定程度上解决如何提高存储设备的性能的技术问题。本申请还提供了一种压缩系统、设备及计算机可读存储介质。
为了实现上述目的，本申请提供如下技术方案：
一种压缩方法，包括：
在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
基于所述压缩率判断是否对新接收的待存储数据进行压缩；
若是，则对所述待存储数据进行压缩并存储；
若否，则直接将所述待存储数据进行存储。
优选的，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括：
求取数值小于等于预设阈值的所述压缩率占整个所述压缩率的比值；
判断所述比值是否大于等于预设比值，若是，则判定对新接收的所述待存储数据进行压缩，若否，则判定不对新接收的所述待存储数据进行压缩。
优选的，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括；
判断所述压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的所述待存储数据进行压缩，若否，则判定不对新接收的所述待存储数据进行压缩。
优选的，所述获取存储设备中已压缩的数据的压缩率之前，还包括：
按照预设规则配置所述判断周期，其中，所述预设规则包括相邻两个所述判断周期间不存在时间间隔的规则。
优选的，所述获取存储设备中已压缩的数据的压缩率之前，还包括：
按照预设规则配置所述判断周期，其中，所述预设规则包括相邻两个所述判断周期间存在预设时间间隔的规则。
优选的，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括：
基于所述压缩率判断是否对所述预设时间间隔内新接收的所述待存储数据进行压缩。
优选的，所述直接将所述待存储数据进行存储之后，还包括：
随机选取预设数量的所述待存储数据进行压缩，统计其压缩率；
基于选取的所述待存储数据的压缩率判断是否对每一个所述待存储数据进行压缩，若是，则对每一个所述待存储数据进行压缩并存储。
一种压缩系统，包括：
第一获取模块，用于在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
第一判断模块，用于基于所述压缩率判断是否对新接收的待存储数据进行压缩，若是，则对所述待存储数据进行压缩并存储；若否，则直接将所述待存储数据进行存储。
一种压缩设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上任一所述的压缩方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如上任一所述的压缩方法的步骤。
本申请提供的一种压缩方法，在当前判断周期内，获取存储设备中已压缩的数据的压缩率；基于压缩率判断是否对新接收的待存储数据进行压缩；若是，则对待存储数据进行压缩并存储；若否，则直接将待存储数据进行存储。本申请提供的一种压缩方法，根据已压缩数据的压缩率来判断是否对待存储数据进行压缩，也即本申请提供的一种压缩方法并不是对每一个待存储数据均进行压缩，而是对待存储数据选择性的进行压缩，从而使得存储设备可以降低因压缩数据所带来的负载压力，降低出现IO阻塞的风险，提高存储设备的IOPS，提高存储设备的性能。本申请提供的一种压缩系统、设备及计算机可读存储介质也解决了相应技术问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种压缩方法的第一结构示意图；
图2为本申请实施例提供的一种压缩方法的第二流程图；
图3为本申请实施例提供的一种压缩系统的结构示意图；
图4为本申请实施例提供的一种压缩设备的结构示意图；
图5为本申请实施例提供的一种压缩设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在存储领域中，待存储数据多种多样，对存储设备高负载、低时延的要求也越来越高。为了节省存储设备的空间，在存储待存储数据时，会对待存储数据进行压缩。然而，在对待存储数据进行压缩的过程中，压缩待存储数据会增加CPU的负载，而待存储数据是以IO进程进行存储的，所以对待存储数据进行压缩时有时会阻塞IO，影响设备的IOPS(Input/Output Operations Per Second，每秒进行读写操作的次数)，使得存储设备的性能降低。本申请提供的一种压缩方法可以提高存储设备的性能。
请参阅图1，图1为本申请实施例提供的一种压缩方法的第一结构示意图。
本申请实施例提供的一种压缩方法，可以包括以下步骤：
步骤S101：在当前判断周期内，获取存储设备中已压缩的数据的压缩率。
实际应用中，在当前判断周期内，可以先获取存储设备中已压缩的数据的压缩率，这里所涉及的压缩率指的是压缩后的数据的大小与压缩前的数据的大小的比值，不难理解，压缩率越小，数据被压缩的效果越好，压缩率越大，数据被压缩的效果越差。由当前判断周期的描述可知，本申请实施例提供的一种压缩方法中存在多个判断周期，判断周期的个数可以根据实际需要确定，且每个判断周期内均需执行本申请实施例提供的一种压缩方法。
步骤S102：基于压缩率判断是否对新接收的待存储数据进行压缩；若是，则执行步骤S103，若否，则执行步骤S104。
步骤S103：对待存储数据进行压缩并存储。
步骤S104：直接将待存储数据进行存储。
实际应用中，在获取存储设备中已压缩的数据的压缩率后，便可以基于已压缩的数据的压缩率判断是否对新接收的待存储数据进行压缩，若是，则对新接收的待存储数据进行压缩，并且将压缩后的待存储数据存储在存储设备中，若否，则直接将待存储数据进行存储。也即本申请实施例提供的一种压缩方法，可以根据已压缩的数据的压缩率来预测是否将待存储数据进行压缩，可以根据已压缩的数据的压缩率来灵活控制待存储数据的压缩。待存储数据的类型、大小、数量等可以根据具体应用场景确定，此外，应当指出，在存储设备中，待存储数据一般以IO进程的形式进行处理，其并不影响本申请的实施。
实际应用中，基于压缩率判断是否对新接收的待存储数据进行压缩的过程可以具体为：求取数值小于等于预设阈值的压缩率占整个压缩率的比值；判断比值是否大于等于预设比值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。也即预先设定有一个预设阈值及预设比值，由压缩率越小，数据被压缩的效果越好的逻辑可知，通过求取数值小于等于预设阈值的压缩率占整个压缩率的比值，可以判断已压缩数据的压缩效果是否较好，不难理解，数值小于等于预设阈值的压缩率占整个压缩率的比值的数值越大，已压缩数据的整体压缩效果越好，反之越差，所以具体应用中，可以通过判断该比值是否大于等于预设比值来判断是否对待存储数据进行压缩，若该比值小于预设比值，则表示已压缩数据的压缩效果并未达到预期效果，此时，即使对待存储数据进行压缩，也只会消耗存储设备的IO，且不会给存储设备存储待存储数据的过程带来便利，所以，此时可以选择不对待存储数据进行压缩，而是直接将待存储数据进行存储；相反，在该比值大于预设比值时，可以对待存储数据进行压缩后再存储。
实际应用中，为了快速确定出是否对待存储数据进行压缩，进而快速对待存储数据进行存储，基于压缩率判断是否对新接收的待存储数据进行压缩的过程可以具体为；判断压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。也即具体应用场景中，可以只通过判断压缩率的最大值是否小于等于预设数值来决定是否对待存储数据进行压缩，不难理解，如果压缩率的最大值小于预设数值，则所有的压缩率的值均小于预设数值，由此便可以判定已压缩的数据的压缩效果满足预期效果，此时，可以对待存储数据进行压缩后再存储。
实际应用中，在获取存储设备中已压缩的数据的压缩率之前，还可以按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间不存在时间间隔的规则。也即本申请实施例提供的一种压缩方法中，判断周期为连续的周期，一个判断周期完成后直接进行下一个判断周期，此时，在判断是否对新接收的待存储数据进行压缩时，也可以根据当前判断周期内的压缩率判断是否对当前判断周期内新接收的待存储数据进行压缩，还可以根据当前判断周期内的压缩率判断是否对下一个判断周期内新接收的待存储数据进行压缩等，具体的判断规则可以根据具体应用场景确定。
实际应用中，在获取存储设备中已压缩的数据的压缩率之前，还可以按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间存在预设时间间隔的规则。也即本申请实施例提供的一种压缩方法中，判断周期为不连续的周期，一个判断周期完成后需等待预设时间间隔再进行下一个判断周期，此时，在判断是否对新接收的待存储数据进行压缩时，可以基于当前判断周期内的压缩率判断是否对当前判断周期内的待存储数据进行压缩，还可以基于当前判断周期内的压缩率判断是否对当前判断周期相邻的后一个预设时间间隔内的待存储数据进行压缩，还可以基于当前判断周期内的压缩率判断是否对当前判断周期的下一个判断周期内的待存储数据进行压缩等。
实际应用中，为了尽可能的节省存储设备的存储空间，在直接将待存储数据进行存储之后，还可以随机选取预设数量的待存储数据进行压缩，统计其压缩率；基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩，若是，则对每一个待存储数据进行压缩并存储。也即在判定不对新接收的待存储数据进行压缩后，在下一次判定对待存储数据进行压缩的时刻到来之前，所有的待存储数据均是直接存储在存储设备中的，由此会消耗存储设备大量的空间，为了节省存储设备的空间，可以再次开启压缩进程，具体过程可以参阅本实施例，当然还可以有其他判断是否开启压缩进程的方法，本申请在此不做具体限定。应当指出，本实施例中，基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩时，可以判断选取的待存储数据的压缩率是否均小于等于50％，若是，则判定对每一个待存储数据进行压缩，若否，则判定不对每一个待存储数据进行压缩，当然，还可以有其他判断方法，本申请在此不做具体限定。
本申请提供的一种压缩方法，在当前判断周期内，获取存储设备中已压缩的数据的压缩率；基于压缩率判断是否对新接收的待存储数据进行压缩；若是，则对待存储数据进行压缩并存储；若否，则直接将待存储数据进行存储。本申请提供的一种压缩方法，根据已压缩数据的压缩率来判断是否对待存储数据进行压缩，也即本申请提供的一种压缩方法并不是对每一个待存储数据均进行压缩，而是对待存储数据选择性的进行压缩，从而使得存储设备可以降低因压缩数据所带来的负载压力，降低出现IO阻塞的风险，提高存储设备的IOPS，提高存储设备的性能。
请参阅图2，图2为本申请实施例提供的一种压缩方法的第二流程图。
实际应用中，本申请实施例提供的一种压缩方法可以包括以下步骤：
步骤S201：按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间存在预设时间间隔的规则。
步骤S202：在当前判断周期内，获取存储设备中已压缩的数据的压缩率。
步骤S203：求取数值小于等于预设阈值的压缩率占整个压缩率的比值。
步骤S204：判断比值是否大于等于预设比值，若是，则执行步骤S205，若否，则执行步骤S206。
步骤S205：对待存储数据进行压缩并存储。
步骤S206：直接将待存储数据进行存储，执行步骤S207。
步骤S207：随机选取预设数量的待存储数据进行压缩，统计其压缩率。
步骤S208：基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩，若是，则执行步骤S209。
步骤S209：对每一个待存储数据进行压缩并存储。
本申请还提供了一种压缩系统，其具有本申请实施例提供的一种压缩方法所具有的对应效果。请参阅图3，图3为本申请实施例提供的一种压缩系统的结构示意图。
本申请实施例提供的一种压缩系统，可以包括：
第一获取模块101，用于在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
第一判断模块102，用于基于压缩率判断是否对新接收的待存储数据进行压缩，若是，则对待存储数据进行压缩并存储；若否，则直接将待存储数据进行存储。
本申请实施例提供的一种压缩系统中，第一判断模块可以包括：
第一求取单元，用于求取数值小于等于预设阈值的压缩率占整个压缩率的比值；
第一判断单元，用于判断比值是否大于等于预设比值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩系统，第一判断模块可以包括；
第二判断单元，用于判断压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩系统，还可以包括：
第一配置模块，用于第一获取模块获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间不存在时间间隔的规则。
本申请实施例提供的一种压缩系统，还可以包括：
第二配置模块，用于第一获取模块获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间存在预设时间间隔的规则。
本申请实施例提供的一种压缩系统，第一判断模块可以包括：
第三判断模块，用于基于压缩率判断是否对预设时间间隔内新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩系统，还可以包括：
第一选取模块，用于第一判断模块直接将待存储数据进行存储之后，随机选取预设数量的待存储数据进行压缩，统计其压缩率；
第二判断模块，用于基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩，若是，则对每一个待存储数据进行压缩并存储。
本申请还提供了一种压缩设备及计算机可读存储介质，其均具有本申请实施例提供的一种压缩方法具有的对应效果。请参阅图4，图4为本申请实施例提供的一种压缩设备的结构示意图。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机程序，处理器202执行存储器201中存储的计算机程序时实现以下步骤：
在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
基于压缩率判断是否对新接收的待存储数据进行压缩；
若是，则对待存储数据进行压缩并存储；
若否，则直接将待存储数据进行存储。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：求取数值小于等于预设阈值的压缩率占整个压缩率的比值；判断比值是否大于等于预设比值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：判断压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间不存在时间间隔的规则。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间存在预设时间间隔的规则。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：基于压缩率判断是否对预设时间间隔内新接收的待存储数据进行压缩。
本申请实施例提供的一种压缩设备，包括存储器201与处理器202，存储器201中存储有计算机子程序，处理器202执行存储器201中存储的计算机子程序时具体实现以下步骤：直接将待存储数据进行存储之后，随机选取预设数量的待存储数据进行压缩，统计其压缩率；基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩，若是，则对每一个待存储数据进行压缩并存储。
请参阅图5，本申请实施例提供的另一种压缩设备中还可以包括：与处理器202连接的输入端口203，用于传输外界输入的命令至处理器202；与处理器202连接的显示单元204，用于显示处理器202的处理结果至外界；与处理器202连接的通信模块205，用于实现压缩设备与外界的通信。显示单元204可以为显示面板、激光扫描使显示器等；通信模块205所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接：无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
基于压缩率判断是否对新接收的待存储数据进行压缩；
若是，则对待存储数据进行压缩并存储；
若否，则直接将待存储数据进行存储。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：求取数值小于等于预设阈值的压缩率占整个压缩率的比值；判断比值是否大于等于预设比值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：判断压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的待存储数据进行压缩，若否，则判定不对新接收的待存储数据进行压缩。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间不存在时间间隔的规则。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：获取存储设备中已压缩的数据的压缩率之前，按照预设规则配置判断周期，其中，预设规则包括相邻两个判断周期间存在预设时间间隔的规则。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：基于压缩率判断是否对预设时间间隔内新接收的待存储数据进行压缩。
本申请实施例提供的一种计算机可读存储介质，计算机可读存储介质中存储有计算机子程序，计算机子程序被处理器执行时具体实现以下步骤：直接将待存储数据进行存储之后，随机选取预设数量的待存储数据进行压缩，统计其压缩率；基于选取的待存储数据的压缩率判断是否对每一个待存储数据进行压缩，若是，则对每一个待存储数据进行压缩并存储。
本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
本申请实施例提供的一种压缩系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的一种压缩方法中对应部分的详细说明，在此不再赘述。另外，本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。
还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种压缩方法，其特征在于，包括：
在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
基于所述压缩率判断是否对新接收的待存储数据进行压缩；
若是，则对所述待存储数据进行压缩并存储；
若否，则直接将所述待存储数据进行存储。
2.根据权利要求1所述的方法，其特征在于，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括：
求取数值小于等于预设阈值的所述压缩率占整个所述压缩率的比值；
判断所述比值是否大于等于预设比值，若是，则判定对新接收的所述待存储数据进行压缩，若否，则判定不对新接收的所述待存储数据进行压缩。
3.根据权利要求1所述的方法，其特征在于，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括；
判断所述压缩率的最大值是否小于等于预设数值，若是，则判定对新接收的所述待存储数据进行压缩，若否，则判定不对新接收的所述待存储数据进行压缩。
4.根据权利要求1所述的方法，其特征在于，所述获取存储设备中已压缩的数据的压缩率之前，还包括：
按照预设规则配置所述判断周期，其中，所述预设规则包括相邻两个所述判断周期间不存在时间间隔的规则。
5.根据权利要求1所述的方法，其特征在于，所述获取存储设备中已压缩的数据的压缩率之前，还包括：
按照预设规则配置所述判断周期，其中，所述预设规则包括相邻两个所述判断周期间存在预设时间间隔的规则。
6.根据权利要求5所述的方法，其特征在于，所述基于所述压缩率判断是否对新接收的待存储数据进行压缩，包括：
基于所述压缩率判断是否对所述预设时间间隔内新接收的所述待存储数据进行压缩。
7.根据权利要求1至6任一项所述的方法，其特征在于，所述直接将所述待存储数据进行存储之后，还包括：
随机选取预设数量的所述待存储数据进行压缩，统计其压缩率；
基于选取的所述待存储数据的压缩率判断是否对每一个所述待存储数据进行压缩，若是，则对每一个所述待存储数据进行压缩并存储。
8.一种压缩系统，其特征在于，包括：
第一获取模块，用于在当前判断周期内，获取存储设备中已压缩的数据的压缩率；
第一判断模块，用于基于所述压缩率判断是否对新接收的待存储数据进行压缩，若是，则对所述待存储数据进行压缩并存储；若否，则直接将所述待存储数据进行存储。
9.一种压缩设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述的压缩方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的压缩方法的步骤。
CN201811463468.9A 2018-12-03 2018-12-03 一种压缩方法、系统、设备及计算机可读存储介质 Active CN109558088B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811463468.9A CN109558088B (zh) 2018-12-03 2018-12-03 一种压缩方法、系统、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811463468.9A CN109558088B (zh) 2018-12-03 2018-12-03 一种压缩方法、系统、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109558088A true CN109558088A (zh) 2019-04-02
CN109558088B CN109558088B (zh) 2021-12-17

Family

ID=65868579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811463468.9A Active CN109558088B (zh) 2018-12-03 2018-12-03 一种压缩方法、系统、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN109558088B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111277274A (zh) * 2020-01-13 2020-06-12 平安国际智慧城市科技股份有限公司 数据压缩方法、装置、设备及存储介质
CN113872947A (zh) * 2021-09-15 2021-12-31 珠海格力电器股份有限公司 数据上报方法及装置、电子设备和计算机可读存储介质
CN115934660A (zh) * 2022-12-22 2023-04-07 深圳大普微电子科技有限公司 一种压缩决策方法、装置、设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001024514A (ja) * 1999-07-07 2001-01-26 Sony Corp データ記録装置
CN103929185A (zh) * 2013-01-10 2014-07-16 国际商业机器公司 实时减少数据压缩的中央处理单元开销的方法和系统
US20160092361A1 (en) * 2014-09-26 2016-03-31 Intel Corporation Caching technologies employing data compression
CN105847390A (zh) * 2016-04-22 2016-08-10 乐视控股（北京）有限公司 数据传输的方法、装置及计算机设备
CN106844090A (zh) * 2015-12-07 2017-06-13 国际商业机器公司 基于压缩比历史的数据复制

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001024514A (ja) * 1999-07-07 2001-01-26 Sony Corp データ記録装置
CN103929185A (zh) * 2013-01-10 2014-07-16 国际商业机器公司 实时减少数据压缩的中央处理单元开销的方法和系统
US20160092361A1 (en) * 2014-09-26 2016-03-31 Intel Corporation Caching technologies employing data compression
CN106844090A (zh) * 2015-12-07 2017-06-13 国际商业机器公司 基于压缩比历史的数据复制
CN105847390A (zh) * 2016-04-22 2016-08-10 乐视控股（北京）有限公司 数据传输的方法、装置及计算机设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111277274A (zh) * 2020-01-13 2020-06-12 平安国际智慧城市科技股份有限公司 数据压缩方法、装置、设备及存储介质
CN113872947A (zh) * 2021-09-15 2021-12-31 珠海格力电器股份有限公司 数据上报方法及装置、电子设备和计算机可读存储介质
CN113872947B (zh) * 2021-09-15 2022-09-16 珠海格力电器股份有限公司 数据上报方法及装置、电子设备和计算机可读存储介质
CN115934660A (zh) * 2022-12-22 2023-04-07 深圳大普微电子科技有限公司 一种压缩决策方法、装置、设备及可读存储介质

Also Published As

Publication number Publication date
CN109558088B (zh) 2021-12-17

Similar Documents

Publication Publication Date Title
CN109558088A (zh) 一种压缩方法、系统、设备及计算机可读存储介质
CN109976679A (zh) 一种分布式集群卷预读方法、系统、设备及计算机介质
CN104657284B (zh) 存储设备的扩展利用区域
KR102005227B1 (ko) 데이터 처리 시스템과 이의 동작 방법
CN106484331A (zh) 一种数据处理方法、装置及闪存设备
US10031572B2 (en) Method and device for processing core of processor, and terminal
CN109254927A (zh) 一种固态硬盘磨损均衡的实现方法
CN103619078A (zh) 一种通信处理方法及终端
CN105573682A (zh) 一种san存储系统及其数据读写方法
CN109976680A (zh) 一种数据迁移方法、装置、设备及可读存储介质
CN111930216A (zh) Gpu功耗控制方法、装置、处理系统及存储介质
CN109542911A (zh) 一种元数据组织方法、系统、设备及计算机可读存储介质
CN103763596B (zh) 一种状态切换方法及装置
CN109189336A (zh) 一种存储系统线程调整方法、系统及电子设备和存储介质
CN105446848B (zh) 电子设备的数据处理性能的测试方法及装置
CN105373350A (zh) 一种数据管理方法及装置
CN111512673A (zh) 一种网络节点的唤醒方法及设备
CN110335599A (zh) 一种语音控制方法、系统、设备及计算机可读存储介质
CN102505421B (zh) 一种洗涤剂自动投入的方法
CN111510479B (zh) 一种异构缓存系统的资源分配方法及装置
CN106201714A (zh) 一种odex优化方法及系统
CN109558085A (zh) 一种压缩方法、系统、设备及计算机可读存储介质
CN111914116B (zh) 视频数据存储方法、装置、终端设备及可读存储介质
CN109542799B (zh) 块存储器拼接方法、拼接模块、存储装置及现场可编程门阵列
CN105045725B (zh) 一种移动终端多存储卡存储实现方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant