CN117389479A - 一种数据存储方法、装置、设备及计算机存储介质 - Google Patents
一种数据存储方法、装置、设备及计算机存储介质 Download PDFInfo
- Publication number
- CN117389479A CN117389479A CN202311448382.XA CN202311448382A CN117389479A CN 117389479 A CN117389479 A CN 117389479A CN 202311448382 A CN202311448382 A CN 202311448382A CN 117389479 A CN117389479 A CN 117389479A
- Authority
- CN
- China
- Prior art keywords
- data
- target
- sub
- compressed
- groups
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000013500 data storage Methods 0.000 title claims abstract description 45
- 230000006837 decompression Effects 0.000 claims abstract description 38
- 238000012545 processing Methods 0.000 claims abstract description 28
- 230000008569 process Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 238000004590 computer program Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000006467 substitution reaction Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/602—Providing cryptographic facilities or services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0643—Management of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种数据存储方法、装置、设备及计算机存储介质。该方法包括:获取目标数据,目标数据为压缩数据;对目标数据进行拆分,得到N组压缩子数据;从N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;对目标压缩子数据进行解压处理,得到目标子数据;存储目标子数据,以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据;从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行对目标压缩子数据进行解压处理,直至M=0。根据本申请实施例,有效节省了车载终端的存储空间。
Description
技术领域
本申请属于数据存储技术领域,尤其涉及一种数据存储方法、装置、设备及计算机存储介质。
背景技术
电控单元(ECU,Electronic Control Unit)是发动机的综合控制装置。它的功用是根据自身存储的程序对发动机各传感器输入的各种信息进行运算、处理、判断、然后输出指令,控制有关执行器动作,达到快速、准确、自动控制发动机工作的目的。
通常在车辆的ECU需要进行远程升级的情况下,需要获取用于远程升级的压缩数据并对其进行解压处理,以得到解压后的数据,但是由于压缩数据和解压后的数据都需要占用一定的存储空间,因此车载终端需要为ECU的远程升级提供较大的存储空间,而在得到解压后的数据后,压缩数据可以删除掉,压缩数据所占用的存储空间被闲置,导致车载终端存储空间的资源浪费。
发明内容
本申请实施例提供一种数据存储方法、装置、设备及计算机存储介质,能够有效节省了车载终端的存储空间。
第一方面,本申请实施例提供一种数据存储方法,方法包括:
获取目标数据,目标数据为压缩数据;
对目标数据进行拆分,得到N组压缩子数据,N为大于1的整数;
从N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;
对目标压缩子数据进行解压处理,得到目标子数据;
存储目标子数据,以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据,M为大于或等于0且小于N的整数;
从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行对目标压缩子数据进行解压处理,直至M=0。
在一些实施例中,在对目标数据进行拆分,得到N组压缩子数据之后,方法还包括:
将N组压缩子数据存储至硬件存储空间中;
从N组压缩子数据中删除目标压缩子数据,包括:
从硬件存储空间存储的N组压缩子数据中,删除目标压缩子数据。
在一些实施例中,对目标压缩子数据进行解压处理,得到目标子数据,包括:
将硬件存储空间中存储的目标压缩子数据存储至内存空间中;
在内存空间中对目标压缩子数据进行解压处理,得到目标子数据;
删除内存空间中存储的目标压缩子数据。
在一些实施例中,存储目标子数据,包括:
将目标子数据存储至硬件存储空间;
从内存空间中删除目标子数据。
在一些实施例中,目标数据包括K组加密子数据;
在对目标数据进行拆分,得到N组压缩子数据之前,方法还包括:
从K组加密子数据中选取一组加密子数据作为目标加密子数据,K为大于1的整数;
对目标加密子数据进行解密处理,得到目标解密数据;
存储目标解密数据,以及从K组加密子数据中删除目标加密子数据,得到剩余的T组加密子数据,T为大于或等于0且小于K的整数;
从T组加密子数据中选取一组加密子数据作为新的目标加密子数据,并返回执行对目标加密子数据进行解密处理,直至T=0,得到解密后的目标数据;
对目标数据进行拆分,得到N组压缩子数据,包括:
对解密后的目标数据进行拆分,得到N组压缩子数据。
在一些实施例中,在获取目标数据之后,方法还包括:
将K组加密子数据存储至硬件存储空间中;
从K组加密子数据中删除目标加密子数据,包括:
从硬件存储空间存储的K组加密子数据中,删除目标加密子数据。
在一些实施例中,对目标加密子数据进行解密处理,得到目标解密数据,包括:
将硬件存储空间中存储的目标加密子数据存储至内存空间中;
在内存空间中对目标加密子数据进行解密处理,得到目标解密数据;
删除内存空间中存储的目标加密子数据。
在一些实施例中,存储目标解密数据,包括:
将目标解密数据存储至硬件存储空间;
从内存空间中删除目标解密数据。
在一些实施例中,存储目标解密数据,以及从K组加密子数据中删除目标加密子数据,包括:
将目标加密子数据替换为目标解密数据。
在一些实施例中,目标加密子数据的数据量与其对应的目标解密数据的数据量相同。
第二方面,本申请实施例提供一种数据存储装置,包括:
获取模块,用于获取目标数据,目标数据为压缩数据;
拆分模块,用于对目标数据进行拆分,得到N组压缩子数据,N为大于1的整数;
选取模块,用于从N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;
解压模块,用于对目标压缩子数据进行解压处理,得到目标子数据;
存储模块,用于存储目标子数据,以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据,M为大于或等于0且小于N的整数;
返回模块,用于从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行对目标压缩子数据进行解压处理,直至M=0。
第三方面,本申请实施例提供一种电子设备,设备包括:处理器以及存储有计算机程序指令的存储器;
处理器执行计算机程序指令时实现如第一方面任意一项的数据存储方法。
第四方面,本申请实施例提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现如第一方面任意一项的数据存储方法。
第五方面,本申请实施例提供一种计算机程序产品,计算机程序产品中的指令由电子设备的处理器执行时,使得电子设备执行如第一方面任意一项的数据存储方法。
本申请实施例的数据存储方法、装置、设备及计算机存储介质,能够将目标压缩数据拆分为多组压缩子数据,对多组压缩子数据逐一的进行解压处理,每完成一组压缩子数据的解压处理,得到该组压缩子数据对应的目标子数据后,删除该组压缩子数据,直至得到全部压缩子数据对应的目标子数据,也即,通过分组的形式对压缩数据逐步进行解压,每解压一组压缩数据就删除对应的压缩子数据,从而有效节省了车载终端的存储空间。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单的介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个实施例提供的数据存储方法的流程示意图;
图2是本申请实施例提出的对压缩文件进行解密的流程示意图;
图3是本申请另一个实施例提供的数据存储方法的流程示意图;
图4是本申请实施例提出的对数据进行加密和解密的流程示意图;
图5是本申请实施例提出的数据覆写流程示意图;
图6是本申请一个实施例提供的数据存储装置的结构示意图;
图7是本申请一个实施例提供的电子设备的结构示意图。
附图标记
1-压缩文件;2-子文件;3-解压文件;4-原始数据;5-目标数据;6-目标解密数据;7-加密子数据;8-目标加密子数据;9-目标解密数据;10-原地址。
具体实施方式
下面将详细描述本申请的各个方面的特征和示例性实施例,为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及具体实施例,对本申请进行进一步详细描述。应理解,此处所描述的具体实施例仅意在解释本申请,而不是限定本申请。对于本领域技术人员来说,本申请可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本申请的示例来提供对本申请更好的理解。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
电控单元(ECU,Electronic Control Unit)是发动机的综合控制装置。它的功用是根据自身存储的程序对发动机各传感器输入的各种信息进行运算、处理、判断、然后输出指令,控制有关执行器动作,达到快速、准确、自动控制发动机工作的目的。
通常在车辆的ECU需要进行远程升级的情况下,也即在汽车远程升级(OTA,Over-the-Air)技术领域,需要获取用于远程升级的压缩数据并对其进行解压处理,以得到解压后的数据,但是由于压缩数据和解压后的数据都需要占用一定的存储空间,因此车载终端需要为ECU的远程升级提供较大的存储空间,例如人机界面(HMI,Human MachineInterface)设备的升级数据的数据量通常是GB级别的,在数据量较大的情况下主控ECU很难提供足够的磁盘空间,而在得到解压后的数据后,压缩数据可以删除掉,压缩数据所占用的存储空间被闲置,导致车载终端存储空间的资源浪费。
基于上述问题,本申请提出一种数据存储方法、装置、设备及计算机存储介质,能够将目标压缩数据拆分为多组压缩子数据,对多组压缩子数据逐一的进行解压,每完成一组压缩子数据的解压处理,得到该组压缩子数据对应的目标子数据后,删除该组压缩子数据,直至得到全部压缩子数据对应的目标子数据,也即,通过分组的形式对压缩数据逐步进行解压,每解压一组压缩数据就删除对应的压缩子数据,从而有效节省了车载终端的存储空间。
下面首先对本申请实施例所提供的数据存储方法进行介绍。
图1是本申请一个实施例提供的数据存储方法的流程示意图。如图1所示,本申请实施例提供的数据存储方法,包括以下步骤:S101-S107。
S101:获取目标数据。
其中,目标数据为压缩数据。
在本申请实施例中,目标数据可以是用于进行OTA升级的数据,目标数据可以是压缩数据。
作为一种示例,上述目标数据可以是车载终端从服务器进行下载得到的。
S102:对目标数据进行拆分,得到N组压缩子数据。
其中,N为大于1的整数。
在一个实施例中,可以预先获取预设拆分组数,按照预设拆分组数对目标数据进行拆分,得到N组压缩子数据。也即,在预设拆分组数固定的情况下,目标数据的数据总量越大,每组压缩子数据的数据量越大。
在另一个实施例中,可以预先获取预设压缩子数据的数据量,按照预设压缩子数据的数据量对目标数据进行拆分,得到N组压缩子数据。也即,在数据量固定的情况下,目标数据的数据总量越大,拆分得到的压缩子数据的组数越多。
在本申请一些实施例中,可以先将目标数据存储至硬件存储空间中,在从硬件存储空间中选取一组预设数据量的待解压子数据作为目标待解压子数据,将目标待解压子数据在内存空间中进行打包处理,得到打包处理后的目标待解压子数据,也即得到一组压缩子数据,将该组压缩子数据存储至硬件存储空间中,删除硬件存储空间中存储的上述待解压子数据,从而完成其中一组压缩子数据的拆分。重复上述步骤,直至将硬件存储空间中的目标数据拆分为N组压缩子数据。这样,每次在内存空间中仅对一组待解压子数据进行打包处理,进一步降低了内存空间的占用量。
作为一种示例,上述打包处理可以是将目标待解压子数据存储在一个文件夹中。
S103:从N组压缩子数据中选取一组压缩子数据作为目标压缩子数据。
在一个实施例中,可以从N组压缩子数据中随机选取一组压缩子数据作为目标压缩子数据,也可以按照预设顺序从N组压缩子数据中随机选取一组压缩子数据作为目标压缩子数据。
S104:对目标压缩子数据进行解压处理,得到目标子数据。
需要说明的是,上述对目标压缩子数据进行解压处理的方法,可以采用现有的数据解压处理方式来实现,在此不做赘述。
在本申请一些实施例中,可以将N组压缩子数据存储至车载终端的硬件存储空间中,S104具体可以包括以下步骤:
将硬件存储空间中存储的目标压缩子数据存储至内存空间中;
在内存空间中对目标压缩子数据进行解压处理,得到目标子数据;
删除内存空间中存储的目标压缩子数据。
作为一种示例,硬件存储空间可以是磁盘空间。
可以理解的是,硬件存储空间的容量主要为车载终端设备提供储存数据的空间,而内存容量主要给车载终端的运行系统和应用提供运行空间,前者提供“储存空间”,后者提供“运行空间”。而内存空间的容量相比于硬件存储空间的容量要小得多。
在一个实施例中,为了进一步节省内存空间,可以将硬件存储空间中存储的目标压缩子数据存储至内存空间中,在内存空间中对目标压缩子数据进行解压处理,得到目标子数据,得到目标子数据,也即完成解压处理后,删除内存空间中存储的目标压缩子数据。
这样,可以在内存空间中进行多次解压处理来完成对整个目标数据的解压,也就是说在内存空间中每完成一个目标压缩子数据的解压处理之后,存储目标子数据,然后删除内存空间中存储的目标压缩子数据。从而减小了对内存空间的占用。
S105:存储目标子数据,以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据。
其中,M为大于或等于0且小于N的整数。
在本申请一些实施例中,在S102之后,该方法还可以包括以下步骤:
将N组压缩子数据存储至硬件存储空间中。
S105可以包括以下步骤:
从硬件存储空间存储的N组压缩子数据中,删除目标压缩子数据。
在一个实施例中,可以将拆分得到的N组压缩子数据存储至车载终端的硬件存储空间中,从硬件存储空间中存储的N组压缩子数据中选取一组压缩子数据作为目标压缩子数据,对目标压缩子数据进行解压处理,得到并存储该目标子数据,从硬件存储空间存储的N组压缩子数据中,删除目标压缩子数据。
可以理解,在将N组压缩子数据存储至硬件存储空间中之后,每完成一个目标压缩子数据的解压处理,得到目标子数据之后,就将硬件存储空间存储的N组压缩子数据中相应的目标压缩子数据删除,从而有效减少了硬件存储空间存储的占用。
需要说明的是,若使用常规解压方式对目标数据整体进行解压处理,则需要分别存储解压前的数据和解压后的数据,例如,在存储目标数据占用了100MB的硬件存储空间,且目标数据的压缩率为50%的情况下,车载终端的主控ECU在解压期间还需要再额外占用200MB的硬件存储空间来存储解压后的文件,解压完成后共占用300MB的硬件存储空间。
在本申请上述实施例中,解压期间的硬件存储空间占用量峰值是解压到最后一组目标压缩子数据时的数据量,此时的硬件存储空间总占用量是解压后的所有数据的数据量加上最后一组目标压缩子数据的数据量大小。
举例来说,若目标数据的数据量为100MB,将目标数据拆分成了10组压缩子数据,则一组压缩子数据占用1/10的存储空间,也就是目标数据的数据量的10%大小;又例如,若拆分时拆分成了50组,则一组压缩子数据占用1/50的存储空间,也就是目标数据的数据量的2%大小。再例如,若将目标数据为拆分为二十组压缩子数据,则解压处理期间需要额外使用占用目标数据的数据量的5%的存储空间,也就是占用5MB的硬件存储空间,同时由于100MB的目标数据会逐渐被解压为200MB,因此解压期间硬件存储空间的空间占用量峰值不会超过205MB,解压完成后压缩包会被删除,占用200MB的硬件存储空间。
在本申请一些实施例中,上述存储目标子数据,具体可以包括:
将目标子数据存储至硬件存储空间;
从内存空间中删除目标子数据。
在一个实施例中,可以将目标子数据存储至硬件存储空间,从内存空间中删除目标子数据,从而进一步节约内存空间。
S106:判断M是否等于0。
S107:若M不等于0,从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行S104,直至M=0。
在一个实施例中,在存储目标子数据以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据之后,从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,返回执行对目标压缩子数据进行解压处理,直至全部的压缩子数据都被解压为目标子数据,并将全部的目标子数据进行存储,也即,直至M=0。
举例来说,如图2所示,将一个压缩文件1拆分成若干个子文件2,再逐个读取子文件,对子文件进行解压,对压缩文件进行拆解后再逐个读取若干个子文件可以及时清理已处理的子文件,降低解压期间的绝对空间占用。若固定将压缩文件拆分成二十个子文件,每解压处理完一个子文件的数据得到解压文件3之后,可以将该子文件删除,从而保证在整个解压过程中最多额外占用一个子文件的存储空间,也就是占用上述压缩文件总大小的5%,因此上述分组解压的方式可以将解压过程中的额外空间占用降低到原来的5%。
本申请实施例提供的上述数据存储方法,通过将目标压缩数据拆分为多组压缩子数据,对多组压缩子数据逐一的进行解压,每完成一组压缩子数据的解压处理,得到该组压缩子数据对应的目标子数据后,删除该组压缩子数据,直至得到全部压缩子数据对应的目标子数据,也即,通过分组的形式对压缩数据逐步进行解压,每解压一组压缩数据就删除对应的压缩子数据,从而有效节省了车载终端的存储空间。
可以理解,由于数据传输使用的超文本传输协议(Hypertext TransferProtocol,HTTP),也就是基于TCP/IP协议,无法保证通信的安全性,因此进行数据传输时一般都会额外使用数据加密技术来预防数据被拦截或泄露。数据加密技术的基本原理是发送方通过加密设备或加密算法对数据进行加密,用加密密钥将数据加密后发送出去,接收方在收到密文后,用解密密钥将密文解密,恢复为明文,这样,即使在传输过程中密文数据被劫取也不会泄漏实际的数据。
通常加密时会采用替换和置换的方法,结合替换是指使用密钥将明文中的一个字符转换为密文中的一个字符,置换则是指将字符按照不同顺序重新排列,因此,选取适合的加密方法且不添加填充的情况下,可以保证数据加密前后的字符长度一致。同时,出于“分组加密”的思想,大多数加密算法在加密时,都会将明文分成多个等长的模块,然后分别对每组数据进行加密或者解密操作。
然而,现有的对目标数据的解密方式是开辟全新的空间来存储解密后数据,通常情况下解密前后的数据大小不会有显著变化,因此,若目标数据的数据量为100MB,则车载终端的主控ECU解密期间需要额外使用100MB的硬件存储空间存储解密后的文件,解密完成后共占用硬件存储空间200MB,而得到解密后的文件之后,加密数据可以删除,加密数据所占用的存储空间被闲置,导致车载终端存储空间的资源浪费。
为进一步降低存储空间的占用,提高存储资源的利用率,请参见图3,是本申请另一个实施例提供的数据存储方法的流程示意图。如图3所示,在上述对目标数据进行拆分,得到N组压缩子数据之前,该数据存储方法还可以包括:S301-S305。
S301:从K组加密子数据中选取一组加密子数据作为目标加密子数据。
其中,K为大于1的整数。
其中,目标数据包括K组加密子数据。
在一个实施例中,可以从K组加密子数据中随机选取一组加密子数据作为目标加密子数据,也可以按照预设的要求从K组加密子数据中随机选取一组加密子数据作为目标加密子数据。
S302:对目标加密子数据进行解密处理,得到目标解密数据。
在一个实施例中,服务器可以调用三方库,如开放式安全套接层协议(Open SSL,Open Secure Sockets Layer)接口对原始数据进行加密,得到上述K组加密子数据,加密方法可以使用密码学中的高级加密标准(Advanced Encryption Standard,AES)、计算器模式(Counter,CTR)、无填充No Padding方式中的任意一种。
在一个实施例中,如图4所示,服务器可以对原始数据4进行分组,得到16组原始子数据,分别对16组原始子数据进行加密处理,得到目标数据5,车载终端在获取到目标数据5之后,对目标数据5进行解密处理,得到每组原始子数据各自对应的目标解密数据6。
S303:存储目标解密数据,以及从K组加密子数据中删除目标加密子数据,得到剩余的T组加密子数据。
其中,T为大于或等于0且小于K的整数。
在本申请一些实施例中,S303具体可以包括:
将目标加密子数据替换为目标解密数据。
可以理解,在得到目标解密数据之后,可以将目标加密子数据直接替换为目标解密数据,也即将目标解密数据覆写至存储目标加密子数据的原地址,从而实现无需额外开辟其他存储空间。
如图5所示,从16组加密子数据7中仅选取一组加密子数据作为目标加密子数据8,对目标加密子数据8进行解密处理,得到目标解密数据9,将该目标解密数据9覆写至存储上述目标加密子数据8的原地址10。
在本申请一些实施例中,目标加密子数据的数据量与其对应的目标解密数据的数据量相同。
在一个实施例中,可以选择不添加填充的方式对原始数据进行加密处理,这样,可以使对原始数据进行加密得到的目标数据在解密之后的数据量与解密之前的数据量相同,也即,目标加密子数据的数据量与其对应的目标解密数据的数据量相同。
这样,相比于采用添加填充的方式对原始数据进行加密,在上述将目标解密数据覆写至存储目标加密子数据的原地址后,在原地址的存储空间能够得到充分的利用,不会存在多余的存储空间,从而进一步节约了存储空间。
S304:判断T是否等于0。
S305:在T不等于0的情况下,从T组加密子数据中选取一组加密子数据作为新的目标加密子数据,并返回执行S302,直至T=0,得到解密后的目标数据。
在一个实施例中,存储目标解密数据,以及从K组加密子数据中删除目标加密子数据,得到剩余的T组加密子数据之后,从T组加密子数据中选取一组加密子数据作为新的目标加密子数据,并返回执行对目标加密子数据进行解密处理,直至全部的目标加密子数据被解密为目标解密数据,并将全部的目标解密数据进行存储,也即,直至T=0。
在本申请实施例中,上述对目标数据进行拆分,得到N组压缩子数据,包括:
对解密后的目标数据进行拆分,得到N组压缩子数据。
在一个实施例中,在目标数据为加密加压数据的情况下,车载终端在获取得到目标数据之后,先对目标数据进行解密处理,将解密处理后得到的目标数据进行解压处理,得到N组目标子数据。
在本申请一些实施例中,在上述获取目标数据之后,方法还包括:
将K组加密子数据存储至硬件存储空间中;
从K组加密子数据中删除目标加密子数据,包括:
从硬件存储空间存储的K组加密子数据中,删除目标加密子数据。
在一个实施例中,可以将K组加密子数据存储至硬件存储空间中,从硬件存储空间中存储的K组加密子数据中选取一组加密子数据作为目标加密子数据,对目标加密子数据进行解密处理,得到目标解密数据,存储目标解密数据后,从硬件存储空间存储的K组加密子数据中,删除目标加密子数据。
可以理解,在将K组加密子数据存储至硬件存储空间中之后,每完成一组加密子数据的解压处理,得到目标解密数据之后,就将硬件存储空间存储的K组加密子数据中对应的目标加密子数据删除,从而进一步减少了硬件存储空间的占用。
在本申请一些实施例中,S302具体可以包括:
将硬件存储空间中存储的目标加密子数据存储至内存空间中;
在内存空间中对目标加密子数据进行解密处理,得到目标解密数据;
删除内存空间中存储的目标加密子数据。
在一个实施例中,为了进一步节省内存空间,可以将硬件存储空间中存储的目标加密子数据存储至内存空间中,在内存空间中对目标加密子数据进行解密处理,得到目标解密数据后,删除内存空间中存储的目标加密子数据。也即,每次在内存空间中完成一组目标加密子数据的解密处理之后,就删除内存空间中存储的目标加密子数据,从而减小了内存空间的占用,节约内存空间。
在本申请一些实施例中,上述存储目标解密数据,具体可以包括:
将目标解密数据存储至硬件存储空间;
从内存空间中删除目标解密数据。
在一个实施例中,可以将目标解密数据存储至硬件存储空间,从内存空间中删除目标解密数据,从而进一步节约了内存空间。
以上为本申请实施例提供的数据存储方法,该方法在目标数据为加密数据的情况下,将目标主句中的多组加密子数据逐一进行解密处理,每完成一组加密子数据的解密处理之后,删除该组加密子数据,直至完成全部加密子数据的解密处理,也即通过分组的形式对目标数据进行解密处理,每解密得到一组目标解密数据就删除其对应的目标加密子数据,从而有效节省了车载终端的存储空间。
基于上述实施例提供的数据存储方法,结合附图6介绍本申请实施例提供的数据存储装置的具体实施方式。
参见图6,是本申请一个实施例提供的数据存储装置的结构示意图,该数据存储装置600包括:
获取模块601,用于获取目标数据,目标数据为压缩数据;
拆分模块602,用于对目标数据进行拆分,得到N组压缩子数据,N为大于1的整数;
选取模块603,用于从N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;
解压模块604,用于对目标压缩子数据进行解压处理,得到目标子数据;
存储模块605,用于存储目标子数据,以及从N组压缩子数据中删除目标压缩子数据,得到剩余的M组压缩子数据,M为大于或等于0且小于N的整数;
返回模块606,用于从M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行对目标压缩子数据进行解压处理,直至M=0。
本申请实施例提供的上述轴承故障诊断模型的训练装置,通过将目标压缩数据拆分为多组压缩子数据,对多组压缩子数据逐一的进行解压,每完成一组压缩子数据的解压处理,得到该组压缩子数据对应的目标子数据后,删除该组压缩子数据,直至得到全部压缩子数据对应的目标子数据,也即,通过分组的形式对压缩数据逐步进行解压,每解压一组压缩数据就删除对应的压缩子数据,从而有效节省了车载终端的存储空间。
作为本申请的一种实现方式,上述装置还可以包括:
存储模块605,还用于将N组压缩子数据存储至硬件存储空间中;
存储模块605可以包括:
删除子模块,用于从硬件存储空间存储的N组压缩子数据中,删除目标压缩子数据。
作为本申请的一种实现方式,上述解压模块604可以包括:
存储子模块,用于将硬件存储空间中存储的目标压缩子数据存储至内存空间中;
解压子模块,用于在内存空间中对目标压缩子数据进行解压处理,得到目标子数据;
删除子模块,还用于删除内存空间中存储的目标压缩子数据。
作为本申请的一种实现方式,上述存储模块605还可以包括:
存储子模块,还用于将目标子数据存储至硬件存储空间;
删除子模块,还用于从内存空间中删除目标子数据。
作为本申请的一种实现方式,目标数据包括K组加密子数据,装置还可以包括
选取模块,还用于从K组加密子数据中选取一组加密子数据作为目标加密子数据,K为大于1的整数;
解密模块,还用于对目标加密子数据进行解密处理,得到目标解密数据;
存储模块,还用于存储目标解密数据,以及从K组加密子数据中删除目标加密子数据,得到剩余的T组加密子数据,T为大于或等于0且小于K的整数;
返回模块,还用于从T组加密子数据中选取一组加密子数据作为新的目标加密子数据,并返回执行对目标加密子数据进行解密处理,直至T=0,得到解密后的目标数据;
拆分模块602包括:
拆分子模块,还用于对解密后的目标数据进行拆分,得到N组压缩子数据。
在本申请实施例中,装置还可以包括:
存储模块,还用于将K组加密子数据存储至硬件存储空间中;
存储模块605还可以包括:
存储子模块,还用于从硬件存储空间存储的K组加密子数据中,删除目标加密子数据。
在本申请实施例中,解密模块还可以包括:
存储子模块,还用于将硬件存储空间中存储的目标加密子数据存储至内存空间中;
解密子模块,还用于在内存空间中对目标加密子数据进行解密处理,得到目标解密数据;
删除子模块,还用于删除内存空间中存储的目标加密子数据。
在本申请实施例中,存储模块605还可以包括:
将目标解密数据存储至硬件存储空间;
从内存空间中删除目标解密数据。
在本申请实施例中,存储模块605还可以包括:
替换子模块,用于将目标加密子数据替换为目标解密数据。
图7是本申请一个实施例提供的电子设备的结构示意图。
电子设备700可以包括处理器701以及存储有计算机程序指令的存储器702。
具体地,上述处理器701可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本申请实施例的一个或多个集成电路。
存储器702可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器702可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器702可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器702可在综合网关容灾设备的内部或外部。在特定实施例中,存储器702是非易失性固态存储器。存储器702可包括只读存储器(ROM),随机存取存储器(RAM),磁盘存储介质设备,光存储介质设备,闪存设备,电气、光学或其他物理/有形的存储器存储设备。因此,通常,存储器702包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介质(例如,存储器设备),并且当该软件被执行(例如,由一个或多个处理器)时,其可执行上述实施例中的任意一种数据存储方法所描述的操作。
处理器701通过读取并执行存储器702中存储的计算机程序指令,以实现上述实施例中的任意一种数据存储方法。
在一个示例中,电子设备700还可包括通信接口703和总线710。其中,如图7所示,处理器701、存储器702、通信接口703通过总线710连接并完成相互间的通信。
通信接口703,主要用于实现本申请实施例中各模块、装置、单元和/或设备之间的通信。
总线710包括硬件、软件或两者,将在线数据流量计费设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线710可包括一个或多个总线。尽管本申请实施例描述和示出了特定的总线,但本申请考虑任何合适的总线或互连。
另外,结合上述实施例中的数据存储方法,本申请实施例可提供一种计算机存储介质来实现。该计算机存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种数据存储方法。
需要明确的是,本申请并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本申请的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本申请的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时,本申请的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
还需要说明的是,本申请中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或系统。但是,本申请不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
上面参考根据本申请的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本申请的各方面。应当理解,流程图和/或框图中的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给通用计算机、专用计算机、或其它可编程数据处理装置的处理器,以产生一种机器,使得经由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的一个或多个方框中指定的功能/动作的实现。这种处理器可以是但不限于是通用处理器、专用处理器、特殊应用处理器或者现场可编程逻辑电路。还可理解,框图和/或流程图中的每个方框以及框图和/或流程图中的方框的组合,也可以由执行指定的功能或动作的专用硬件来实现,或可由专用硬件和计算机指令的组合来实现。
以上所述,仅为本申请的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。
Claims (10)
1.一种数据存储方法,其特征在于,包括:
获取目标数据,所述目标数据为压缩数据;
对所述目标数据进行拆分,得到N组压缩子数据,N为大于1的整数;
从所述N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;
对所述目标压缩子数据进行解压处理,得到目标子数据;
存储所述目标子数据,以及从所述N组压缩子数据中删除所述目标压缩子数据,得到剩余的M组压缩子数据,M为大于或等于0且小于N的整数;
从所述M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行所述对所述目标压缩子数据进行解压处理,直至M=0。
2.根据权利要求1所述的数据存储方法,其特征在于,在所述对所述目标数据进行拆分,得到N组压缩子数据之后,所述方法还包括:
将所述N组压缩子数据存储至硬件存储空间中;
所述从所述N组压缩子数据中删除所述目标压缩子数据,包括:
从所述硬件存储空间存储的所述N组压缩子数据中,删除所述目标压缩子数据。
3.根据权利要求2所述的数据存储方法,其特征在于,所述对所述目标压缩子数据进行解压处理,得到目标子数据,包括:
将所述硬件存储空间中存储的所述目标压缩子数据存储至内存空间中;
在所述内存空间中对所述目标压缩子数据进行解压处理,得到所述目标子数据;
删除所述内存空间中存储的所述目标压缩子数据。
4.根据权利要求3所述的数据存储方法,其特征在于,所述存储所述目标子数据,包括:
将所述目标子数据存储至所述硬件存储空间;
从所述内存空间中删除所述目标子数据。
5.根据权利要求1所述的数据存储方法,其特征在于,所述目标数据包括K组加密子数据;
在对所述目标数据进行拆分,得到N组压缩子数据之前,所述方法还包括:
从所述K组加密子数据中选取一组加密子数据作为目标加密子数据,K为大于1的整数;
对所述目标加密子数据进行解密处理,得到目标解密数据;
存储所述目标解密数据,以及从所述K组加密子数据中删除所述目标加密子数据,得到剩余的T组加密子数据,T为大于或等于0且小于K的整数;
从所述T组加密子数据中选取一组加密子数据作为新的目标加密子数据,并返回执行所述对所述目标加密子数据进行解密处理,直至T=0,得到解密后的目标数据;
所述对所述目标数据进行拆分,得到N组压缩子数据,包括:
对所述解密后的目标数据进行拆分,得到N组压缩子数据。
6.根据权利要求5所述的数据存储方法,其特征在于,在所述获取目标数据之后,所述方法还包括:
将所述K组加密子数据存储至硬件存储空间中;
所述从所述K组加密子数据中删除所述目标加密子数据,包括:
从所述硬件存储空间存储的K组加密子数据中,删除所述目标加密子数据。
7.根据权利要求6所述的数据存储方法,其特征在于,所述对所述目标加密子数据进行解密处理,得到目标解密数据,包括:
将所述硬件存储空间中存储的所述目标加密子数据存储至内存空间中;
在所述内存空间中对所述目标加密子数据进行解密处理,得到所述目标解密数据;
删除所述内存空间中存储的所述目标加密子数据。
8.根据权利要求7所述的数据存储方法,其特征在于,所述存储所述目标解密数据,包括:
将所述目标解密数据存储至所述硬件存储空间;
从所述内存空间中删除所述目标解密数据。
9.根据权利要求5所述的数据存储方法,其特征在于,所述存储所述目标解密数据,以及从所述K组加密子数据中删除所述目标加密子数据,包括:
将所述目标加密子数据替换为所述目标解密数据。
10.一种数据存储装置,其特征在于,包括:
获取模块,用于获取目标数据,所述目标数据为压缩数据;
拆分模块,用于对所述目标数据进行拆分,得到N组压缩子数据,N为大于1的整数;
选取模块,用于从所述N组压缩子数据中选取一组压缩子数据作为目标压缩子数据;
解压模块,用于对所述目标压缩子数据进行解压处理,得到目标子数据;
存储模块,用于存储所述目标子数据,以及从所述N组压缩子数据中删除所述目标压缩子数据,得到剩余的M组压缩子数据,M为大于或等于0且小于N的整数;
返回模块,用于从所述M组压缩子数据中选取一组压缩子数据作为新的目标压缩子数据,并返回执行所述对所述目标压缩子数据进行解压处理,直至M=0。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311448382.XA CN117389479A (zh) | 2023-11-02 | 2023-11-02 | 一种数据存储方法、装置、设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311448382.XA CN117389479A (zh) | 2023-11-02 | 2023-11-02 | 一种数据存储方法、装置、设备及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117389479A true CN117389479A (zh) | 2024-01-12 |
Family
ID=89439010
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311448382.XA Pending CN117389479A (zh) | 2023-11-02 | 2023-11-02 | 一种数据存储方法、装置、设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117389479A (zh) |
-
2023
- 2023-11-02 CN CN202311448382.XA patent/CN117389479A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113343305B (zh) | 隐私数据的交集计算方法、装置、设备及存储介质 | |
EP0793366B1 (en) | Method and apparatus for encrypting data | |
CN109413051B (zh) | 数据加密方法、装置、计算机设备及存储介质 | |
CN110019075B (zh) | 日志加密方法与解密方法及装置 | |
CN110704854B (zh) | 针对文本数据保留格式的流式加密方法 | |
CN107534549B (zh) | 可读存储介质、用于数据流字块加密的方法及系统 | |
US8402282B2 (en) | Method and device for encrypting and decrypting digital data | |
CN108063760B (zh) | 一种分组加密的方法及其系统、分组解密的方法 | |
CN108737353B (zh) | 一种基于数据分析系统的数据加密方法及装置 | |
CN113938270A (zh) | 弹性降低复杂度的数据加密方法和装置 | |
CN104995866A (zh) | 使用利用无进位乘法计算的通用哈希函数的消息认证 | |
CN111552938B (zh) | 文件加密方法及装置 | |
CN116633526B (zh) | 一种数据处理方法、装置、设备及介质 | |
CN106817216B (zh) | 一种基于Zlib库和AES算法的ZIP包解压方法 | |
JP4703805B2 (ja) | 暗号化装置、暗号化方法、復号化装置、復号化方法および通信システム | |
CN117389479A (zh) | 一种数据存储方法、装置、设备及计算机存储介质 | |
CN101882991B (zh) | 基于分组密码算法的通讯数据流加密方法 | |
JP4130272B2 (ja) | 送信装置とその方法、受信装置とその方法および通信システム | |
CN115941304A (zh) | 数据的加密方法、装置、终端设备和计算机可读存储介质 | |
GB2590282A (en) | Cryptographic key management for end-to-end communication security | |
CN115426111A (zh) | 一种数据加密方法、装置、电子设备及存储介质 | |
CN112333699B (zh) | 一种物联网通信协议加密方法、设备及存储介质 | |
CN114357520A (zh) | 文件生成方法和装置、文件编码信息发送方法和装置 | |
JP2017005412A (ja) | データ処理装置、データ送信方法、コンピュータプログラム、及びデータサーバ | |
CN110568992A (zh) | 一种数据处理装置及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |