CN114356225A - 存储器的数据存储方法、装置、终端设备以及存储介质 - Google Patents

存储器的数据存储方法、装置、终端设备以及存储介质 Download PDF

Info

Publication number
CN114356225A
CN114356225A CN202111551693.XA CN202111551693A CN114356225A CN 114356225 A CN114356225 A CN 114356225A CN 202111551693 A CN202111551693 A CN 202111551693A CN 114356225 A CN114356225 A CN 114356225A
Authority
CN
China
Prior art keywords
data
cold
memory
compression
compressed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111551693.XA
Other languages
English (en)
Inventor
曾国忠
陈寄福
吴大畏
李晓强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deyi Microelectronics Co ltd
Original Assignee
Deyi Microelectronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deyi Microelectronics Co ltd filed Critical Deyi Microelectronics Co ltd
Priority to CN202111551693.XA priority Critical patent/CN114356225A/zh
Publication of CN114356225A publication Critical patent/CN114356225A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608Saving storage space on storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0673Single storage device
    • G06F3/0679Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Memory System (AREA)

Abstract

本发明公开了一种存储器的数据存储方法、装置、终端设备以及计算机存储介质,该方法包括:检测所述存储器中符合预设压缩条件的冷数据;确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;将针对所述冷数据进行压缩得到的压缩数据进行存储;接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。本发明能够在极大程度上减少该冷数据对于存储器空间的占用,有效地避免存储器因空间不足导致性能变差影响数据的正常读写应用。并且,由于减少冷数据占用的存储空间,还能够有效地减少存储器自身进行垃圾回收对存储介质的磨损,从而提升存储器性能和使用寿命。

Description

存储器的数据存储方法、装置、终端设备以及存储介质
技术领域
本发明涉及存储器技术领域,尤其涉及一种存储器的数据存储方法、装置、终端设备以及计算机存储介质。
背景技术
时下,在军事、车载、工控、视频监控、网络监控、网络终端、电力、医疗、航空、导航设备等诸多领域,均已经离不开使用存储设备来进行数据的读写应用。然而,在任意领域,数据往往都是源源不断的在产生,可该任意领域所使用的存储设备的存储空间却毕竟是有限的,从而,常常会出现存储设备因空间不足而需要进行相应更新,如此,不仅会对正常进行数据读写应用带来严重影响,还会相应增加使用成本。
发明内容
本发明的主要目的在于提供一种存储器的数据存储方法、装置、终端设备以及计算机存储介质,旨在减少数据对于存储器空间的占用,避免存储器因空间不足导致性能变差影响数据的正常读写应用,实现充分利用存储器有限的存储空间尽可能多的存储更多数据,确保存储器性能和提升存储器使用寿命。
为实现上述目的,本发明提供一种存储器的数据存储方法,所述存储器的数据存储方法包括:
检测所述存储器中符合预设压缩条件的冷数据;
确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
将针对所述冷数据进行压缩得到的压缩数据进行存储;
接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
进一步地,所述压缩等级与所述冷数据的冷热程度相对应;
所述确定所述冷数据对应的压缩等级的步骤,包括:
获取所述冷数据的冷热程度;
若所述冷热程度为第一冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第一等级;或者,
若所述冷热程度为第二冷程度,则确定所述压缩等级为所述第二冷程度对应的第一等级,其中,所述第二冷程度高于所述第一冷程度,所述第二等级高于所述第一等级。
进一步地,所述按照所述压缩等级针对所述冷数据进行压缩的步骤,包括:
确定所述冷数据对应的数据压缩算法;
使用所述数据压缩算法按照所述第一等级,将所述冷数据压缩成为第一压缩数据;或者,
使用所述数据压缩算法按照所述第二等级,将所述冷数据压缩成为第二压缩数据,其中,所述第二压缩数据的压缩率高于所述第一压缩数据的压缩率。
进一步地,所述对所述压缩数据进行解压还原的步骤,包括:
确定针对所述冷数据进行压缩得到所述压缩数据时使用的数据压缩算法;
根据所述数据压缩算法针对所述压缩数据进行解压还原以得到所述冷数据。
进一步地,所述冷数据包括:用户数据中的冷数据和表格数据中的冷数据;
所述检测所述存储器中符合预设压缩条件的冷数据的步骤,包括:
从所述所述存储器存储的用户数据中,检测符合所述用户数据对应的预设压缩条件的冷数据;
从所述所述存储器存储的表格数据中,检测符合所述表格数据对应的预设压缩条件的冷数据。
进一步地,所述存储器包括:预设冷读区域;
所述数据存储方法还包括:
检测所述预设冷读区域中存储的数据,并将所述数据标记为冷数据,并执行所述检测所述存储器中符合预设压缩条件的冷数据之后的步骤。
进一步地,所述存储器的数据存储方法还包括:
检测所述存储器的数据存储指令中是否携带有预设的冷数据标识;
若是,则在执行所述指令时,针对所述指令指向的待存储数据进行压缩后存储在所述存储器中。
此外,为实现上述目的,本发明还提供一种存储器的数据存储装置,所述存储器的数据存储装置包括:
检测模块,用于检测所述存储器中符合预设压缩条件的冷数据;
数据压缩模块,用于确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
存储模块,用于将针对所述冷数据进行压缩得到的压缩数据进行存储;
读取模块,用于接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
本发明存储器的数据存储装置的各功能模块在运行时实现如上述的存储器的数据存储方法的步骤。
此外,为实现上述目的,本发明还提供一种终端设备,所述终端设备包括:集成有机械硬盘和固态硬盘的存储设备、处理器及存储在所述存储设备上并可在所述处理器上运行的数据存储程序,所述数据存储程序被所述处理器执行时实现如上述中的存储器的数据存储方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机存储介质,所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述的存储器的数据存储方法的步骤。
本发明提出的存储器的数据存储方法、装置、终端设备以及计算机存储介质,该存储器的数据存储方法包括:检测所述存储器中符合预设压缩条件的冷数据;确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;将针对所述冷数据进行压缩得到的压缩数据进行存储;接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
本发明在存储器处于空闲状态时,首先检测该存储器当中符合预设压缩条件的冷数据,然后,确定该冷数据各自所对应的压缩等级,从而按照该压缩等级来针对该冷数据进行压缩处理;再然后,将针对该冷数据进行压缩处理后得到的压缩数据进行存储;最后,在接收到针对该冷数据的读取指令时,响应该指令以从存储器中读取出对该冷数据进行压缩后的压缩数据,并直接针对该压缩数据进行解压还原。
相比于传统各领域直接针对数据进行存储的方式,本发明通过对存储器当中不常用的冷数据进行压缩后再存储,之后在需要读取该冷数据的情况下再对压缩后的数据进行还原,从而能够在极大程度上减少该冷数据对于存储器空间的占用,有效地避免存储器因空间不足导致性能变差影响数据的正常读写应用。并且,由于减少了冷数据占用的存储空间,还能够有效地减少存储器自身进行垃圾回收对存储介质的磨损。从而,本发明实现了充分利用存储器有限的存储空间尽可能多的存储更多数据,确保存储器性能和提升存储器使用寿命。
附图说明
图1是本发明实施例方案涉及终端设备的硬件运行的结构示意图;
图2是本发明一种存储器的数据存储方法一实施例的流程示意图;
图3是本发明一种存储器的数据存储装置的结构关系示意图。
本发明目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及终端设备的硬件运行环境的结构示意图。
需要说明的是,图1即可为终端设备的硬件运行环境的结构示意图。本发明实施例终端设备可以是包括市场上任意介质,尤其是以nand flash为具体存储介质的存储器,并针对该存储设备执行本发明提供的存储器的数据存储方法的终端设备,该终端设备具体可以是移动终端、数据存储控制终端、PC或者便携计算机等终端设备。
如图1所示,该终端设备可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005(具体可以为上述的存储设备),通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是非易失性存储器(如,Flash存储器)、高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的终端设备结构并不构成对终端设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据存储程序。其中,操作系统是管理和控制样本终端设备硬件和软件资源的程序,支持数据存储程序以及其它软件或程序的运行。
在图1所示的终端设备中,用户接口1003主要用于与各个终端进行数据通信;网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;而处理器1001可以用于调用存储器1005中存储的数据存储程序,并执行以下操作:
检测所述存储器中符合预设压缩条件的冷数据;
确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
将针对所述冷数据进行压缩得到的压缩数据进行存储;
接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
进一步地,所述压缩等级与所述冷数据的冷热程度相对应;处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
获取所述冷数据的冷热程度;
若所述冷热程度为第一冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第一等级;或者,
若所述冷热程度为第二冷程度,则确定所述压缩等级为所述第二冷程度对应的第一等级,其中,所述第二冷程度高于所述第一冷程度,所述第二等级高于所述第一等级。
进一步地,处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
确定所述冷数据对应的数据压缩算法;
使用所述数据压缩算法按照所述第一等级,将所述冷数据压缩成为第一压缩数据;或者,
使用所述数据压缩算法按照所述第二等级,将所述冷数据压缩成为第二压缩数据,其中,所述第二压缩数据的压缩率高于所述第一压缩数据的压缩率。
进一步地,处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
确定针对所述冷数据进行压缩得到所述压缩数据时使用的数据压缩算法;
根据所述数据压缩算法针对所述压缩数据进行解压还原以得到所述冷数据。
进一步地,所述冷数据包括:用户数据中的冷数据和表格数据中的冷数据;处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
从所述所述存储器存储的用户数据中,检测符合所述用户数据对应的预设压缩条件的冷数据;
从所述所述存储器存储的表格数据中,检测符合所述表格数据对应的预设压缩条件的冷数据。
进一步地,所述存储器包括:预设冷读区域;处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
检测所述预设冷读区域中存储的数据,并将所述数据标记为冷数据,并执行所述检测所述存储器中符合预设压缩条件的冷数据之后的步骤。
进一步地,处理器1001可以调用存储器1005中存储的数据存储程序,还执行以下操作:
检测所述存储器的数据存储指令中是否携带有预设的冷数据标识;
若是,则在执行所述指令时,针对所述指令指向的待存储数据进行压缩后存储在所述存储器中。
基于上述的结构,提出本发明存储器的数据存储方法的各个实施例。
需要说明的是,在本实施例中,由于在军事、车载、工控、视频监控、网络监控、网络终端、电力、医疗、航空、导航设备等诸多领域,均已经离不开使用存储设备来进行数据的读写应用。然而,在任意领域,数据往往都是源源不断的在产生,可该任意领域所使用的存储设备的存储空间却毕竟是有限的,从而,常常会出现存储设备因空间不足而需要进行相应更新,如此,不仅会对正常进行数据读写应用带来严重影响,还会相应增加使用成本。
针对上述现象,本申请提供一种存储器的数据存储方法,通过存储器处于空闲状态时,首先检测该存储器当中符合预设压缩条件的冷数据,然后,确定该冷数据各自所对应的压缩等级,从而按照该压缩等级来针对该冷数据进行压缩处理;再然后,将针对该冷数据进行压缩处理后得到的压缩数据进行存储;最后,在接收到针对该冷数据的读取指令时,响应该指令以从存储器中读取出对该冷数据进行压缩后的压缩数据,并直接针对该压缩数据进行解压还原。
相比于传统各领域直接针对数据进行存储的方式,本发明通过对存储器当中不常用的冷数据进行压缩后再存储,之后在需要读取该冷数据的情况下再对压缩后的数据进行还原,从而能够在极大程度上减少该冷数据对于存储器空间的占用,有效地避免存储器因空间不足导致性能变差影响数据的正常读写应用。并且,由于减少了冷数据占用的存储空间,还能够有效地减少存储器自身进行垃圾回收对存储介质的磨损。从而,本发明实现了充分利用存储器有限的存储空间尽可能多的存储更多数据,确保存储器性能和提升存储器使用寿命。
具体地,请参照图2,图2为本发明存储器的数据存储方法第一实施例的流程示意图。
本发明实施例提供了存储器的数据存储方法的实施例,本发明实施例存储器的数据存储方法应用于上述终端设备中来针对存储器进行数据存储。需要说明的是,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本实施例中,本发明存储器的数据存储方法包括:
步骤S100,检测所述存储器中符合预设压缩条件的冷数据;
终端设备在存储器处于空闲状态时,检测该存储器当中符合预设压缩条件的冷数据。
需要说明的是,在本实施例中,预设压缩条件用于判断存储当中已经存储的数据为冷数据从而需要进行压缩后存储的条件。
具体地,例如,在本实施例中,预设压缩条件具体可以为:存储器中存储的数据若为超过一定时间阈值(可基于实际应用的不同设计需要进行设置,本发明存储器的数据存储方法并不针对该时间阈值的具体大小进行限定)的不常用数据时,则需要针对该数据进行压缩后存储。从而,终端设备在存储器不执行数据存储指令或者数据读取指令的空闲状态时,检测该存储器当中的数据是否存在超过一定时间阈值的不常用数据,并在检测到该不常用数据时,立即将该不常用数据确定为符合预设压缩条件的冷数据。
步骤S200,确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
终端设备在检测得到存储器中的冷数据之后,进一步确定该冷数据所对应进行数据压缩的压缩等级,从而按照该压缩等级针对该冷数据进行数据的压缩处理。
需要说明的是,在本实施例中,压缩等级与冷数据实际的冷热程度相对应,若该冷数据的冷热程度的冷程度越高(即越长时间未被读取应用),则对应的该压缩等级也就越高,从而需要按照相对较高的压缩率来对该冷数据进行压缩处理。
此外,在本实施例中,应当理解的是,终端设备在存储器中检测到的冷数据当然可以为多个,而多个冷数据各自对应的压缩等级可以相同或者不相同。
进一步地,在一种可行的实施例中,上述步骤S200中,“确定所述冷数据对应的压缩等级”的步骤,可以包括:
步骤S201,获取所述冷数据的冷热程度;
终端设备在在检测得到存储器中的冷数据之后,进一步先获取该冷数据的冷热程度。
具体地,例如,终端设备通过检测该冷数据持续未被读取的时长来确定该冷数据的冷热程度。即,若该冷数据仅在短时间(如1天)内未被读取,则终端设备确定该冷数据为冷程度较低的数据,或者,若该冷数据是在长时间(如1个月甚至1年)内未被读取,则终端设备确定该冷数据为冷程度较高的数据。
需要说明的是,在本实施例中,基于实际应用的不同设计需要,终端设备当然可以预先设定数据在不同时间内被读取各自对应不同的冷程度,而不仅仅局限于本实施例所列举1天时间内未读取则对应冷程度较低,和1个月甚至1年时间内未读取则对应冷程度较高,本发明存储器的数据存储方法并不针对该时间和对应冷程度的具体设计进行限定。
步骤S202,若所述冷热程度为第一冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第一等级;
终端设备在检测确定出冷数据对应的冷热程度为第一冷程度时,进一步确定对应针对该冷数据进行压缩的压缩等级,即为该第一冷程度对应的第一等级。
步骤S203,若所述冷热程度为第二冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第二等级,其中,所述第二冷程度高于所述第一冷程度,所述第二等级高于所述第一等级。
终端设备在检测确定出冷数据对应的冷热程度为相对比上述第一冷程度要高的第二冷程度时,则进一步确定对应针对该冷数据进行压缩的压缩等级,也即为与该第二冷程度对应且比上述第一等级要高的第二等级。
进一步地,上述步骤S200中,“按照所述压缩等级针对所述冷数据进行压缩”的步骤,可以包括:
步骤S204,确定所述冷数据对应的数据压缩算法;
终端设备在确定对冷数据进行数据压缩的压缩等级之后,或者同步的,进一步确定该冷数据所对应进行数据压缩时要使用的数据压缩算法。
具体地,例如,终端设备预先可以设定不同种类数据各自对应使用的数据压缩算法,从而通过检测冷数据所属的种类来确定针对该冷数据进行数据压缩时要使用的数据压缩算法。
需要说明的是,在本实施例中,数据压缩算法可以为市场上任意成熟的能够针对数据进行压缩的算法,如子带编码、差分编码和哈夫曼编码等编码算法,甚至a率、u率和lloyds最优量化等量化算法。应当理解的是,基于实际应用的不同设计需要,在不同可行的实施方式当中,终端设备当然可以采用任意不同或者相同的数据压缩算法来具体进行数据压缩,本发明存储器的数据存储方法并不针对该数据压缩算法的具体种类以及使用算法进行的具体压缩过程进行限定。
步骤S205,使用所述数据压缩算法按照所述第一等级,将所述冷数据压缩成为第一压缩数据;或者,
步骤S206,使用所述数据压缩算法按照所述第二等级,将所述冷数据压缩成为第二压缩数据,其中,所述第二压缩数据的压缩率高于所述第一压缩数据的压缩率。
终端设备在确定出针对冷数据进行压缩处理时的压缩等级,和需要使用的数据压缩算法之后,若该冷数据对应压缩等级为压缩率较低的第一等级,则终端设备即按照该第一等级的压缩率,使用该数据压缩算法针对该冷数据进行压缩得到对存储空间占用相对较大(但远小于原本冷数据占用的空间)的第一压缩数据;或者,若该冷数据对应压缩等级为压缩率较高的第二等级,则终端设备即按照该第二等级的压缩率,使用该数据压缩算法针对该冷数据进行压缩得到对存储空间占用相对较小(小于第一压缩数据占用的空间)的第二压缩数据。
步骤S300,将针对所述冷数据进行压缩得到的压缩数据进行存储;
终端设备在针对冷数据进行压缩之后,进一步将对该冷数据进行压缩所得到的压缩数据进行存储。
具体地,例如,终端设备可以直接在存储器存储未压缩前冷数据的原物理地址中,确定出其中的一部分地址来存储针对该冷数据进行压缩处理得到的压缩数据;或者,终端设备还可以重新在存储器中找到一部分新的物理地址来针对压缩数据进行存储。
在本实施例中,应当理解的是,终端设备在针对冷数据进行压缩重新存储之后,均需要针对存储器中存储压缩前冷数据物理地址与逻辑地址之间的映射关系进行调整,即,调整为存储压缩冷数据的压缩数据的物理地址,与原逻辑地址之间新的映射关系,如此,终端设备在后续需要读取冷数据时,即可直接按照新的映射关系从存储器中,读取出压缩数据来进行解压还原得到需要读取的冷数据。
步骤S400,接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
终端设备在针对冷数据进行压缩并将压缩后的压缩数据进行存储之后,若终端设备的用户发起了针对该冷数据进行读取的读取指令,则终端设备接收该读取指令,并响应该指令以从存储器当中读取出针对该冷数据进行压缩后得到的压缩数据,之后,再针对该压缩数据进行解压还原,从而得到该用户需要读取的冷数据。
在本实施例中,通过在存储器处于空闲状态时,首先检测该存储器当中符合预设压缩条件的冷数据,然后,确定该冷数据各自所对应的压缩等级,从而按照该压缩等级来针对该冷数据进行压缩处理;再然后,将针对该冷数据进行压缩处理后得到的压缩数据进行存储;最后,在接收到针对该冷数据的读取指令时,响应该指令以从存储器中读取出对该冷数据进行压缩后的压缩数据,并直接针对该压缩数据进行解压还原。
相比于传统各领域直接针对数据进行存储的方式,本发明通过对存储器当中不常用的冷数据进行压缩后再存储,之后在需要读取该冷数据的情况下再对压缩后的数据进行还原,从而能够在极大程度上减少该冷数据对于存储器空间的占用,有效地避免存储器因空间不足导致性能变差影响数据的正常读写应用。并且,由于减少了冷数据占用的存储空间,还能够有效地减少存储器自身进行垃圾回收对存储介质的磨损。从而,本发明实现了充分利用存储器有限的存储空间尽可能多的存储更多数据,确保存储器性能和提升存储器使用寿命。
进一步地,基于上述本发明存储器的数据存储方法的第一实施例,提出本发明存储器的数据存储方法的第二实施例。本实施例与上述第一实施例之间的主要区别在于:上述步骤S400中,“对所述压缩数据进行解压还原”的步骤,可以包括:
步骤S401,确定针对所述冷数据进行压缩得到所述压缩数据时使用的数据压缩算法;
步骤S402,根据所述数据压缩算法针对所述压缩数据进行解压还原以得到所述冷数据。
终端设备在响应用户发起的针对已经压缩的冷数据的读取指令,并从存储器当中读取出针对该冷数据进行压缩后得到的压缩数据,之后,终端设备进一步确定在针对该冷数据进行压缩时所使用的数据压缩算法,从而,通过使用与该数据压缩算法向对应的数据解压方式,来针对该压缩数据进行解压还原,以得到用户所需要读取的原本的冷数据。
在本实施例中,终端设备通过确定针对冷数据进行压缩时使用的数据压缩算法,以使用该数据压缩算法本身对应的数据解压方式,来针对该冷数据的压缩数据进行解压还原,能够确保用户所读取得到的原本的冷数据是准确无误的,进一步避免了对应用存储器进行数据读写的不良影响。
进一步地,基于上述本发明存储器的数据存储方法的第一实施例和第二实施例,提出本发明存储器的数据存储方法的第三实施例。本实施例与上述第一、二实施例之间的主要区别在于:上述的冷数据包括:用户数据中的冷数据和表格数据中的冷数据;上述步骤S100中,“对所述压缩数据进行解压还原”的步骤,可以包括:
步骤S101,从所述所述存储器存储的用户数据中,检测符合所述用户数据对应的预设压缩条件的冷数据;
步骤S102,从所述所述存储器存储的表格数据中,检测符合所述表格数据对应的预设压缩条件的冷数据。
终端设备在检测存储器中存储的冷数据的过程中,针对存储器所存储的不同种类的数据分别进行检测。即,终端设备在针对存储中所存储的用户数据进行检测时,则按照预先设定的该用户数据对应的预设压缩条件,检测全部用户数据当中符合该压缩条件的冷数据,或者,终端设备在针对存储中所存储的表格数据进行检测时,则按照预先设定的该表格数据对应的预设压缩条件,检测全部表格数据当中符合该压缩条件的冷数据。
需要说明的是,在本实施例中,用户数据对应的预设压缩条件除了为:若存储器中存储的数据若为超过一定时间阈值的不常用数据时,则需要针对该数据进行压缩后存储之外,还可以为:若存储器中存储的用户数据为有规则数据时,则需要针对该数据进行压缩后存储,和,若存储器中存储的用户数据为去重复数据时,则需要针对该数据进行压缩后存储。如此,终端设备在针对存储器中存储的用户数据进行检测时,若检测到某用户数据为有规则数据或者去重复数据,则终端设备同样也确定该用户数据为需要进行压缩后存储的冷数据。
同理,表格数据对应的预设压缩条件除了为:若存储器中存储的数据若为超过一定时间阈值的不常用数据时,则需要针对该数据进行压缩后存储之外,还可以为:若存储器中存储的表格数据若为有规则数据(比如L2P里记录一片区域的逻辑地址所对应的物理地址有一定概率是连续的),则需要针对该数据进行压缩后存储。如此,终端设备在针对存储器中存储的表格数据进行检测时,若检测到某表格数据为有规则数据,则终端设备同样也确定该表格数据为需要进行压缩后存储的冷数据。
进一步地,基于上述本发明存储器的数据存储方法的第一实施例、第二实施例和第三实施例,提出本发明存储器的数据存储方法的第四实施例。本实施例与上述各个实施例之间的主要区别在于:上述各实施例中的存储器包括预设冷读区域。本发明存储器的数据存储方法,还可以包括:
步骤S500,检测所述预设冷读区域中存储的数据,并将所述数据标记为冷数据,并执行所述检测所述存储器中符合预设压缩条件的冷数据之后的步骤。
在本实施例中,终端设备可预先在存储器中,将该存储器的逻辑区域划分做用于存储热数据的预设热读区域,和用于存储冷数据的预设冷读区域。如此,终端设备在每一次执行用户发起的数据存储指令即可将指令对应的热数据或者冷数据对应存储至上述的预设热读区域或者预设冷读区域。
需要说明的是,在本实施例中,终端设备具体可以通过解析数据存储指令来确定该指令所指向的需要存写至存储器的待存储数据,并通过读取该待存储数据的属性参数来检测得到该待存储数据的数据量大小、数据来源以及固件针对该待存储数据标记的冷热状态等信息。
终端设备除了上述通过检测数据是否符合预设压缩条件来确定冷数据之外,还可以通过检测上述存储器的预设冷读区域是否存储有数据,并将检测到的该预设冷读区域存储数据直接标记冷数据,然后执行上述各个实施例中针对该冷数据进行压缩后,将压缩数据进行存储,和响应读取指令读取该压缩数据并进行解压还原的过程。
进一步地,在本实施例中,本发明存储器的数据存储方法,还可以包括:
步骤S600,检测所述存储器的数据存储指令中是否携带有预设的冷数据标识;
步骤S600,若是,则在执行所述指令时,针对所述指令指向的待存储数据进行压缩后存储在所述存储器中。
在本实施中,终端设备在基于自身硬件支持从而能够满足存储器进行正常数据读写性能的前提下,除了上述针对存储器已经存储的冷数据进行压缩存储之外,还可以实时的直接针对正在向存储器中存写的待存储数据进行压缩后存储。即,终端设备在接收到用户发起的数据存储指令时,检测该存储指令当中是否携带有用于标记待存储数据为冷数据的冷数据标识,如果检测到有该冷数据标识,则终端设备即在执行该指令在存储器上进行数据存写时,直接按照上述各个实施例中针对冷数据进行压缩后存储的过程,将该指令所指向的待存储数据直接作为冷数据进行压缩存储。
此外,在另一种可行的实施例中,若终端设备检测到数据存储指令当中没有冷数据标识,则终端设备即按照正常的数据存写流程,不针对待存储数据进行压缩,而是直接将待存储数据存写在存储器当中。
此外,请参照图3,本发明实施例还提出一种存储器的数据存储装置,本发明存储器的数据存储装置包括:
检测模块10,用于检测所述存储器中符合预设压缩条件的冷数据;
数据压缩模块20,用于确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
存储模块30,用于将针对所述冷数据进行压缩得到的压缩数据进行存储;
读取模块40,用于接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
优选地,所述压缩等级与所述冷数据的冷热程度相对应;
数据压缩模块20,包括:
获取单元,用于获取所述冷数据的冷热程度;
第一等级确定单元,用于若所述冷热程度为第一冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第一等级;
第二等级确定单元,用于若所述冷热程度为第二冷程度,则确定所述压缩等级为所述第二冷程度对应的第一等级,其中,所述第二冷程度高于所述第一冷程度,所述第二等级高于所述第一等级。
优选地,数据压缩模块20,还包括:
第一算法确定单元,用于确定所述冷数据对应的数据压缩算法;
第一压缩单元,用于使用所述数据压缩算法按照所述第一等级,将所述冷数据压缩成为第一压缩数据;
第二压缩单元,用于使用所述数据压缩算法按照所述第二等级,将所述冷数据压缩成为第二压缩数据,其中,所述第二压缩数据的压缩率高于所述第一压缩数据的压缩率。
优选地,读取模块40,包括:
第二算法确定单元,用于确定针对所述冷数据进行压缩得到所述压缩数据时使用的数据压缩算法;
解压单元,用于根据所述数据压缩算法针对所述压缩数据进行解压还原以得到所述冷数据。
优选地,所述冷数据包括:用户数据中的冷数据和表格数据中的冷数据;
检测模块10,包括:
第一检测单元,用于从所述所述存储器存储的用户数据中,检测符合所述用户数据对应的预设压缩条件的冷数据;
第二检测单元,用于从所述所述存储器存储的表格数据中,检测符合所述表格数据对应的预设压缩条件的冷数据。
优选地,所述存储器包括:预设冷读区域;
本发明存储器的数据存储装置的检测模块10,还用于检测所述预设冷读区域中存储的数据。
优选地,本发明存储器的数据存储装置的检测模块10,还用于检测所述存储器的数据存储指令中是否携带有预设的冷数据标识;
本发明存储器的数据存储装置的存储模块30,还用于在执行所述指令时,针对所述指令指向的待存储数据进行压缩后存储在所述存储器中。
本发明存储器的数据存储装置的各个功能模块在控制器运行时所实现的步骤,可参照上述本发明存储器的数据存储方法的实施例,此处不再赘述。
此外,本发明实施例还提出一种终端设备,该终端设备包括:集成有机械硬盘和固态硬盘的存储设备、处理器及存储在所述存储设备上并可在所述处理器上运行的数据存储程序,该数据存储程序被所述处理器执行时实现如上述中的存储器的数据存储方法的步骤。
其中,在所述处理器上运行的数据存储程序被执行时所实现的步骤可参照本发明存储器的数据存储方法的各个实施例,此处不再赘述。
此外,本发明实施例还提出一种计算机存储介质,应用于计算机,该计算机存储介质可以为非易失性计算机可读计算机存储介质,该计算机存储介质上存储有数据存储程序,所述数据存储程序被处理器执行时实现如上所述的存储器的数据存储方法的步骤。
其中,在所述处理器上运行的数据存储程序被执行时所实现的步骤可参照本发明存储器的数据存储方法的各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个计算机存储介质(如Flash存储器、ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)中,用于控制该存储介质进行数据读写操作的控制器执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种存储器的数据存储方法,其特征在于,所述存储器的数据存储方法包括:
检测所述存储器中符合预设压缩条件的冷数据;
确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
将针对所述冷数据进行压缩得到的压缩数据进行存储;
接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
2.如权利要求1所述的存储器的数据存储方法,其特征在于,所述压缩等级与所述冷数据的冷热程度相对应;
所述确定所述冷数据对应的压缩等级的步骤,包括:
获取所述冷数据的冷热程度;
若所述冷热程度为第一冷程度,则确定所述冷数据对应的压缩等级为所述第一冷程度对应的第一等级;或者,
若所述冷热程度为第二冷程度,则确定所述压缩等级为所述第二冷程度对应的第一等级,其中,所述第二冷程度高于所述第一冷程度,所述第二等级高于所述第一等级。
3.如权利要求2所述的存储器的数据存储方法,其特征在于,所述按照所述压缩等级针对所述冷数据进行压缩的步骤,包括:
确定所述冷数据对应的数据压缩算法;
使用所述数据压缩算法按照所述第一等级,将所述冷数据压缩成为第一压缩数据;或者,
使用所述数据压缩算法按照所述第二等级,将所述冷数据压缩成为第二压缩数据,其中,所述第二压缩数据的压缩率高于所述第一压缩数据的压缩率。
4.如权利要求1至3中任一项所述的存储器的数据存储方法,其特征在于,所述对所述压缩数据进行解压还原的步骤,包括:
确定针对所述冷数据进行压缩得到所述压缩数据时使用的数据压缩算法;
根据所述数据压缩算法针对所述压缩数据进行解压还原以得到所述冷数据。
5.如权利要求1至3中任一项所述的存储器的数据存储方法,其特征在于,所述冷数据包括:用户数据中的冷数据和表格数据中的冷数据;
所述检测所述存储器中符合预设压缩条件的冷数据的步骤,包括:
从所述所述存储器存储的用户数据中,检测符合所述用户数据对应的预设压缩条件的冷数据;
从所述所述存储器存储的表格数据中,检测符合所述表格数据对应的预设压缩条件的冷数据。
6.如权利要求1所述的存储器的数据存储方法,其特征在于,所述存储器包括:预设冷读区域;
所述数据存储方法还包括:
检测所述预设冷读区域中存储的数据,并将所述数据标记为冷数据,并执行所述检测所述存储器中符合预设压缩条件的冷数据之后的步骤。
7.如权利要求1所述的存储器的数据存储方法,其特征在于,所述存储器的数据存储方法还包括:
检测所述存储器的数据存储指令中是否携带有预设的冷数据标识;
若是,则在执行所述指令时,针对所述指令指向的待存储数据进行压缩后存储在所述存储器中。
8.一种存储器的数据存储装置,其特征在于,所述存储器的数据存储装置包括:
检测模块,用于检测所述存储器中符合预设压缩条件的冷数据;
数据压缩模块,用于确定所述冷数据对应的压缩等级,并按照所述压缩等级针对所述冷数据进行压缩;
存储模块,用于将针对所述冷数据进行压缩得到的压缩数据进行存储;
读取模块,用于接收针对所述冷数据的读取指令,响应所述读取指令以读取所述压缩数据并对所述压缩数据进行解压还原。
9.一种终端设备,其特征在于,所述终端设备包括:集成有机械硬盘和固态硬盘的存储设备、处理器及存储在所述存储设备上并可在所述处理器上运行的数据存储程序,所述数据存储程序被所述处理器执行时实现如权利要求1至7中任一项所述的存储器的数据存储方法的步骤。
10.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的存储器的数据存储方法的步骤。
CN202111551693.XA 2021-12-17 2021-12-17 存储器的数据存储方法、装置、终端设备以及存储介质 Pending CN114356225A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111551693.XA CN114356225A (zh) 2021-12-17 2021-12-17 存储器的数据存储方法、装置、终端设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111551693.XA CN114356225A (zh) 2021-12-17 2021-12-17 存储器的数据存储方法、装置、终端设备以及存储介质

Publications (1)

Publication Number Publication Date
CN114356225A true CN114356225A (zh) 2022-04-15

Family

ID=81099358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111551693.XA Pending CN114356225A (zh) 2021-12-17 2021-12-17 存储器的数据存储方法、装置、终端设备以及存储介质

Country Status (1)

Country Link
CN (1) CN114356225A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115225725A (zh) * 2022-05-25 2022-10-21 广州汽车集团股份有限公司 数据压缩存储方法、装置、车辆及存储介质
WO2023226797A1 (zh) * 2022-05-27 2023-11-30 深圳大普微电子科技有限公司 数据压缩方法及闪存设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102929783A (zh) * 2012-10-25 2013-02-13 华为技术有限公司 一种数据存储的方法、装置和系统
US20180046381A1 (en) * 2016-08-09 2018-02-15 International Business Machines Corporation Hybrid compressed media in a tiered storage environment
CN107861999A (zh) * 2017-10-20 2018-03-30 北京集奥聚合科技有限公司 一种hdfs中冷数据的处理方法及系统
CN108984589A (zh) * 2018-05-29 2018-12-11 努比亚技术有限公司 一种数据写入方法及服务器
CN109542358A (zh) * 2018-12-03 2019-03-29 浪潮电子信息产业股份有限公司 一种固态硬盘冷热数据分离方法、装置及设备
CN109802684A (zh) * 2018-12-26 2019-05-24 华为技术有限公司 进行数据压缩的方法和装置
CN109814809A (zh) * 2019-01-14 2019-05-28 杭州宏杉科技股份有限公司 数据压缩方法及装置
CN110543281A (zh) * 2019-07-19 2019-12-06 苏州浪潮智能科技有限公司 一种存储压缩实现方法、装置、设备及存储介质
CN110908608A (zh) * 2019-11-22 2020-03-24 苏州浪潮智能科技有限公司 一种存储空间节省方法及系统
CN111277274A (zh) * 2020-01-13 2020-06-12 平安国际智慧城市科技股份有限公司 数据压缩方法、装置、设备及存储介质
CN112650453A (zh) * 2020-12-31 2021-04-13 北京千方科技股份有限公司 一种用于存储、查询交通数据的方法和系统
CN112965664A (zh) * 2021-03-08 2021-06-15 北京金山云网络技术有限公司 一种数据压缩的方法和相关装置

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102929783A (zh) * 2012-10-25 2013-02-13 华为技术有限公司 一种数据存储的方法、装置和系统
US20180046381A1 (en) * 2016-08-09 2018-02-15 International Business Machines Corporation Hybrid compressed media in a tiered storage environment
CN107861999A (zh) * 2017-10-20 2018-03-30 北京集奥聚合科技有限公司 一种hdfs中冷数据的处理方法及系统
CN108984589A (zh) * 2018-05-29 2018-12-11 努比亚技术有限公司 一种数据写入方法及服务器
CN109542358A (zh) * 2018-12-03 2019-03-29 浪潮电子信息产业股份有限公司 一种固态硬盘冷热数据分离方法、装置及设备
CN109802684A (zh) * 2018-12-26 2019-05-24 华为技术有限公司 进行数据压缩的方法和装置
CN109814809A (zh) * 2019-01-14 2019-05-28 杭州宏杉科技股份有限公司 数据压缩方法及装置
CN110543281A (zh) * 2019-07-19 2019-12-06 苏州浪潮智能科技有限公司 一种存储压缩实现方法、装置、设备及存储介质
CN110908608A (zh) * 2019-11-22 2020-03-24 苏州浪潮智能科技有限公司 一种存储空间节省方法及系统
CN111277274A (zh) * 2020-01-13 2020-06-12 平安国际智慧城市科技股份有限公司 数据压缩方法、装置、设备及存储介质
CN112650453A (zh) * 2020-12-31 2021-04-13 北京千方科技股份有限公司 一种用于存储、查询交通数据的方法和系统
CN112965664A (zh) * 2021-03-08 2021-06-15 北京金山云网络技术有限公司 一种数据压缩的方法和相关装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115225725A (zh) * 2022-05-25 2022-10-21 广州汽车集团股份有限公司 数据压缩存储方法、装置、车辆及存储介质
CN115225725B (zh) * 2022-05-25 2023-08-15 广州汽车集团股份有限公司 数据压缩存储方法、装置、车辆及存储介质
WO2023226797A1 (zh) * 2022-05-27 2023-11-30 深圳大普微电子科技有限公司 数据压缩方法及闪存设备

Similar Documents

Publication Publication Date Title
CN114356225A (zh) 存储器的数据存储方法、装置、终端设备以及存储介质
JP5211751B2 (ja) 計算機、ダンププログラムおよびダンプ方法
CN103218224B (zh) 一种提高存储空间利用率的方法和终端
KR102069940B1 (ko) 페이지 기반 압축 저장 관리
CN111625191A (zh) 一种数据读写方法、装置及电子设备和存储介质
CN111352861B (zh) 内存压缩方法、装置及电子设备
CN108494788B (zh) 数据的传输方法、数据传输装置及计算机可读存储介质
US20100138692A1 (en) Electronic device and method for restoring function settings
CN110109628B (zh) 分布式存储系统的数据重建方法、装置、设备及存储介质
JP2008065834A (ja) フュージョンメモリ装置及び方法
US20080133855A1 (en) Memory and method for data compression and management
CN109656885B (zh) 存储空间监控方法及装置、电子终端、存储介质
CN104461505A (zh) 一种终端
CN103369003A (zh) 一种利用云计算扫描移动设备的冗余文件的方法和系统
US9766812B2 (en) Method and system for storing data in compliance with a compression handling instruction
CN105677259A (zh) 一种移动终端中存储文件的方法及移动终端
WO2017132797A1 (zh) 数据整理方法、存储设备、存储控制器以及存储阵列
CN112181919A (zh) 一种压缩方法、系统及电子设备和存储介质
CN105159975A (zh) 一种待清理数据识别方法、装置及电子设备
CN108958755B (zh) 一种应用程序安装包的生成方法、装置及电子设备
CN108205559B (zh) 一种数据管理方法及其设备
US20090138655A1 (en) Method and terminal for demand paging at least one of code and data requiring real-time response
CN113641643A (zh) 文件写入方法及装置
CN106803902B (zh) 一种红外遥控设备电量显示方法与显示设备
CN113625953B (zh) 一种数据处理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination