CN115905160A - 数据存储的校验方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明实施例提供了一种数据存储的校验方法、装置、电子设备及存储介质，应用于数据处理技术领域，所述方法包括：响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；获取与所述第n块数据对应的第n‑1块数据对应的第一存储对象；根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

Description

数据存储的校验方法、装置、电子设备及存储介质

技术领域

本发明涉及数据处理技术领域，特别是涉及一种数据存储的校验方法、一种数据存储的校验装置、一种电子设备以及一种计算机可读存储介质。

背景技术

分布式文件系统，其可以提供文件系统、块存储以及对象存储等功能。其中，在对象存储中，其提供了追加上传功能，通过将一个大块数据分为N个小块数据，每次上传1个小块数据，通过N次上传操作，完成这个大块数据的上传业务，在数据量很大但网络质量较差的情况下，该功能特性能够保证上传业务的正常，例如可以用于视频业务等流式上传场景。然而，在上述数据上传的过程中，无法对数据进行全量检测，尤其是存在数据追加上传的情况，无法保证数据上传的完整性和可靠性。

发明内容

本发明实施例是提供一种数据存储的校验方法、装置、电子设备以及存储介质，以解决或部分解决分布式文件系统在对数据进行上传的过程中存在无法保证数据上传的完整性和可靠性的问题。

本发明实施例公开了一种数据存储的校验方法，包括：

响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

可选地，所述第一存储对象为经过序列化后的存储对象，所述根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象，包括：

对所述第一存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标存储对象；

采用所述第一目标存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象。

可选地，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据校验成功，包括：

对所述第二存储对象进行序列化，获得与所述第n块数据对应的序列化后的第二目标存储对象；

对所述第二目标存储对象进行持久化，若对所述第二目标存储对象持久化存储成功，则将所述目标存储标识返回所述客户端以表征所述第n块数据存储校验成功。

可选地，所述第一存储对象为经过序列化后的第一MD5存储对象，所述根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象，包括：

对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

可选地，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功，包括：

对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

若对所述第二目标MD5存储对象持久化存储成功，则将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

可选地，应用于分布式文件系统，所述分布式文件系统至少包括MD5增量计算器以及序列化处理计算器，所述第一存储对象为经过序列化后的第一MD5存储对象，所述对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象，包括：

所述MD5增量计算器将所述第一MD5存储对象传输至所述序列化处理计算器；

所述序列化处理计算器对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

所述MD5增量计算器采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

可选地，所述分布式文件系统还包括持久化存储器，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功，包括：

所述序列化处理计算器获取所述MD5增量计算器发送的所述第二MD5存储对象，并对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

所述持久化存储器获取所述MD5增量计算器发送的所述第二目标MD5存储对象，并对所述第二目标MD5存储对象进行持久化存储，若对所述第二目标MD5存储对象持久化存储成功，则生成针对所述第二目标MD5存储对象的持久化成功信息；

所述MD5增量计算器响应于获取到所述持久化成功信息，将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

本发明实施例还公开了一种数据存储的校验装置，包括：

数据获取模块，用于响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

存储对象获取模块，用于获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

存储对象生成模块，用于根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

标识返回模块，用于若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

可选地，所述第一存储对象为经过序列化后的存储对象，所述存储对象生成模块具体用于：

对所述第一存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标存储对象；

采用所述第一目标存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象。

可选地，所述标识返回模块具体用于：

对所述第二存储对象进行序列化，获得与所述第n块数据对应的序列化后的第二目标存储对象；

对所述第二目标存储对象进行持久化，若对所述第二目标存储对象持久化存储成功，则将所述目标存储标识返回所述客户端以表征所述第n块数据存储校验成功。

可选地，所述第一存储对象为经过序列化后的第一MD5存储对象，所述存储对象生成模块具体用于：

对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

可选地，所述标识返回模块具体用于：

对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

若对所述第二目标MD5存储对象持久化存储成功，则将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

可选地，应用于分布式文件系统，所述分布式文件系统至少包括MD5增量计算器、序列化处理计算器以及持久化存储器，所述第一存储对象为经过序列化后的第一MD5存储对象，所述标识返回模块具体用于：

通过所述MD5增量计算器将所述第一MD5存储对象传输至所述序列化处理计算器；

通过所述序列化处理计算器对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

通过所述MD5增量计算器采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象；

其中，所述标识返回模块具体用于：

通过所述序列化处理计算器获取所述MD5增量计算器发送的所述第二MD5存储对象，并对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

通过所述持久化存储器获取所述MD5增量计算器发送的所述第二目标MD5存储对象，并对所述第二目标MD5存储对象进行持久化存储，若对所述第二目标MD5存储对象持久化存储成功，则生成针对所述第二目标MD5存储对象的持久化成功信息；

通过所述MD5增量计算器响应于获取到所述持久化成功信息，将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

本发明实施例还公开了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；

所述存储器，用于存放计算机程序；

所述处理器，用于执行存储器上所存放的程序时，实现如本发明实施例所述的方法。

本发明实施例还公开了一种计算机可读存储介质，其上存储有指令，当由一个或多个处理器执行所述指令时，使得所述处理器执行如本发明实施例所述的方法。

本发明实施例包括以下优点：

在本发明实施例中，对于分布式文件系统，其可以提供对象存储功能，则当分布式文件系统在对客户端上传的数据进行存储的过程中，可以响应于响应于获取到客户端发送的数据追加写入请求，获取与数据追加写入请求对应的第n块数据，n大于1，接着可以获取与第n块数据对应的第n-1块数据对应的第一存储对象，然后根据第一存储对象对第n块数据进行加载，获得与第n块数据对应的目标数据标识以及第二存储对象，若对第二存储对象持久化存储成功，则将目标数据标识返回客户端以表征第n块数据存储校验成功，从而当分布式文件系统对客户端上传的数据进行分块存储时，针对当前需要存储的数据块，可以基于前一个数据块对当前需要存储的数据块进行加载，得到对应的数据标识以及存储对象，然后再对存储对象进行存储，通过将前一个数据块所对应的信息追加到当前数据块所对应的数据标识中，在不增加时间复杂度、不影响系统性能的情况下保证了数据校验的完整性，同时在完成完整的数据块的存储、校验之后，可以向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

附图说明

图1是本发明实施例中提供的一种数据存储的校验方法的步骤流程图；

图2是本发明实施例中提供的一种数据存储的校验装置的结构框图；

图3是本发明实施例中提供的一种电子设备的框图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

作为一种示例，对于分布式文件系统，其所提供的对象存储功能，可以将需要一大块数据分为N个小块数据，每次上传1个小块数据，通过N次上传操作完成该大块数据的上传。然而，在上述数据上传的过程中，无法对数据进行全量检测，尤其是存在数据追加上传的情况，无法保证数据上传的完整性和可靠性。

对此，本发明的核心发明点之一在于对于分布式文件系统，其可以提供对象存储功能，则当分布式文件系统在对客户端上传的数据进行存储的过程中，可以响应于响应于获取到客户端发送的数据追加写入请求，获取与数据追加写入请求对应的第n块数据，n大于1，接着可以获取与第n块数据对应的第n-1块数据对应的第一存储对象，然后根据第一存储对象对第n块数据进行加载，获得与第n块数据对应的目标数据标识以及第二存储对象，若对第二存储对象持久化存储成功，则将目标数据标识返回客户端以表征第n块数据存储校验成功，从而当分布式文件系统对客户端上传的数据进行分块存储时，针对当前需要存储的数据块，可以基于前一个数据块对当前需要存储的数据块进行加载，得到对应的数据标识以及存储对象，然后再对存储对象进行存储，通过将前一个数据块所对应的信息追加到当前数据块所对应的数据标识中，在不增加时间复杂度、不影响系统性能的情况下保证了数据校验的完整性，同时在完成完整的数据块的存储、校验之后，可以向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

参照图1，示出了本发明实施例中提供的一种数据存储的校验方法的步骤流程图，具体可以包括如下步骤：

步骤101，响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

可选地，客户端可以将向分布式文件系统发送相应的数据以通过分布式文件系统对数据进行存储，对于分布式文件系统，其可以将客户端上传的数据进行分块、分次进行存储。例如，针对客户端发送的目标数据，可以将其划分为若干个小的数据块，包括数据块①、数据块②、…、数据块N等等，则分布式文件系统可以按照数据块的顺序依次将对各个数据块进行写入，以实现数据存储。

在具体实现中，分布式文件系统在对数据进行写入的过程中，为了保证数据写入的完整性，在写入第一块数据以及第n块数据的过程中，可以执行不同的数据处理，具体的，在客户端向分布式文件系统上传第一块数据时，分布式文件系统可以先对第一块数据进行加载，计算出其对应的数据标识以及存储对象，接着对存储对象进行序列化，然后将序列化后的存储对象进行持久化存储，并在持久化存储成功后，将数据标识返回给客户端，以表征第一块数据存储校验成功，而对于第n块数据，则可以基于第n-1块数据所对应的相关信息进行校验、写入，以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

需要说明的是，对于存储对象的序列化，通过序列化，可以将存储对象转换为可以存储或传输的形式，以便分布式文件系统对序列化的存储对象进行存储；相应地，对于反序列化，通过反序列化可以将存储对象重新转换可以进行数据创建、编辑等形式，以便分布式文件系统对反序列化的存储对象进行处理。

对于第n块数据的写入，分布式文件系统可以响应于获取到客户端发送的数据追加写入请求，获取与该数据追加写入请求对应的第n块数据，以便对该第n块数据进行写入。其中，n可以为大于1的正整数。

步骤102，获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

在具体实现中，对于需要写入的第n块数据，分布式文件系统可以获取与第n块数据对应的第n-1块数据对应的第一存储对象。可选地，对于需要存储的数据，分布式存储系统可以将该数据转换为对应的存储对象，存储对象可以为数据存储的基本单位，该存储对象可以包括需要存储的数据以及与其相关的属性信息（如数据类型、数据内存大小等）的集合体，客户端上传到分布式文件系统中的数据，均可以以存储对象的形式进行存储。

步骤103，根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

在对第n块数据进行写入时，分布式文件系统在获取了第n-1块数据对应的第一存储对象之后，可以基于该第一存储对象对第n块数据进行加载，获得与第n块数据对应的目标数据标识以及第二存储对象，以便在完成第二存储对象的存储后，可以将目标数据标识返回至客户端，告知客户端完成数据的校验、存储。其中，数据标识可以为用于保证数据传输完整一致的标识，一个数据块可以对应一个数据标识，不同的数据块对应不同的数据标识。

在具体实现中，第一存储对象可以为经过分布式文件系统序列化后的存储对象，则在对第n块数据进行存储时，分布式文件系统可以先对第一存储对象进行反序列化处理，获得与第n-1块数据对应的反序列化的第一目标存储对象，然后可以采用第一目标存储对象对第n块数据进行加载，获得与第n块数据对应的目标数据标识以及第二存储对象。

可选地，对于数据标识，尤其是第n块数据所对应的数据标识，其可以为第n-1块数据所对应的数据标识与第n块数据所对应的数据标识之间的结合，例如，假设分布式文件系统通过相应算法得到第n-1块数据的第一MD5值，则在基于第n-1块数据所对应的反序列化的存储对象对第n块数据进行加载时，可以通过同样的算法运算出第n块数据对应的第二MD5值，然后可以将第n-1块数据对应的第一MD5值与第n块数据对应的第二MD5值进行组合，即“第一MD5值+第二MD5值”作为第n块数据的数据标识，从而分布式文件系统在对追加写入的第n块数据进行写入时，可以基于第n-1块数据所对应的相关信息进行信息追加，保证了数据写入的完整性与可靠性。

步骤104，若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

当分布式文件系统基于第n-1块数据所对应的相关信息对第n块数据进行加载（即将第n块数据转换为相应的存储对象以实现数据存储），得到了第n块数据对应的目标数据标识以及第二存储对象之后，可以对第二存储对象进行持久化存储，若持久化存储成功，则可以将第n块数据对应的目标数据标识返回客户端以表征第n块数据存储校验成功，从而分布式文件系统在对客户端追加上传的第n块数据进行存储的过程中，一方面可以基于第n-1块数据对应的存储对象对第n块数据进行信息追加，生成相应的数据标识，保证数据存储的完整性与可靠性，另一方面通过向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

在具体实现中，分布式文件系统可以对第二存储对象进行序列化，获得与第n块数据对应的序列化后的第二目标存储对象，接着对第二目标存储对象进行持久化，若对第二目标存储对象持久化存储成功，则将目标存储标识返回客户端以表征第n块数据存储校验成功，从而当分布式文件系统对客户端上传的数据进行分块存储时，针对当前需要存储的数据块，可以基于前一个数据块对当前需要存储的数据块进行加载，得到对应的数据标识以及存储对象，然后再对存储对象进行存储，通过将前一个数据块所对应的信息追加到当前数据块所对应的数据标识中，在不增加时间复杂度、不影响系统性能的情况下保证了数据校验的完整性，同时在完成完整的数据块的存储、校验之后，可以向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

在本发明实施例中，对于分布式文件系统，其可以提供对象存储功能，则当分布式文件系统在对客户端上传的数据进行存储的过程中，可以响应于响应于获取到客户端发送的数据追加写入请求，获取与数据追加写入请求对应的第n块数据，n大于1，接着可以获取与第n块数据对应的第n-1块数据对应的第一存储对象，然后根据第一存储对象对第n块数据进行加载，获得与第n块数据对应的目标数据标识以及第二存储对象，若对第二存储对象持久化存储成功，则将目标数据标识返回客户端以表征第n块数据存储校验成功，从而当分布式文件系统对客户端上传的数据进行分块存储时，针对当前需要存储的数据块，可以基于前一个数据块对当前需要存储的数据块进行加载，得到对应的数据标识以及存储对象，然后再对存储对象进行存储，通过将前一个数据块所对应的信息追加到当前数据块所对应的数据标识中，在不增加时间复杂度、不影响系统性能的情况下保证了数据校验的完整性，同时在完成完整的数据块的存储、校验之后，可以向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

为了使本领域技术人员更好地理解本发明实施例中的技术方案，下面通过一个例子进行示例性说明：

对于分布式文件系统，其至少可以包括MD5增量计算器、序列化处理计算器以及持久化存储器，其中，MD5增量计算器可以用于计算待写入数据所对应的MD5对象（即存储对象）以及相应的MD5值（即数据标识）；序列化处理计算器可以用于对MD5对象进行序列化以及反序列化；持久化存储器可以用于对序列化的MD5对象进行存储实现数据存储。

在具体实现中，对于客户端发送的第一块数据，分布式文件系统可以通过MD5增量计算器将第一块数据转换对应的MD5对象以及运算出对应的MD5值，然后将MD5对象传输至序列化处理计算器，由序列化处理计算器对该MD5对象进行序列化，然后序列化处理计算器可以将序列化后的MD5对象传输至MD5增量计算器，由MD5增量计算器将序列化后的MD5对象传输至持久化存储器，持久化存储器可以对序列化后的MD5对象进行持久化存储，并在持久化存储成功之后，可以向MD5增量计算器返回相应的持久化成功信息，接着MD5增量计算器可以将所生成的MD5值返回客户端，告知客户端已经完成对第一块数据的校验、存储。

对于第n块数据的写入，分布式文件系统通过MD5增量计算器响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，然后MD5增量计算器可以从持久化存储器中获取第n-1块数据对应的序列化后的第一MD5存储对象，并将该序列化后的第一MD5存储对象传输至序列化处理计算器，由序列化处理计算器对其进行反序列化，得到第n-1块数据对应的反序列化的第一目标MD5存储对象，并将该第一目标MD5存储对象传输至MD5增量计算器，由MD5增量计算器采用第一目标MD5存储对象对第n块数据进行加载，获得与第n块数据对应的目标MD5值以及第二MD5存储对象，然后序列化处理计算器可以获取MD5增量计算器发送的第二MD5存储对象，并对第二MD5存储对象进行序列化，获得与第n块数据对应序列化后的第二目标MD5存储对象，接着持久化存储器获取MD5增量计算器发送的第二目标MD5存储对象，并对第二目标MD5存储对象进行持久化存储，若对第二目标MD5存储对象持久化存储成功，则生成针对第二目标MD5存储对象的持久化成功信息，MD5增量计算器响应于获取到持久化成功信息，将目标MD5值返回客户端以表征第n块数据存储校验成功。

通过上述过程，对于客户端需要上传的大块数据，通过将大块数据分为若干个小块数据，并依次发送至分布式文件系统进行存储，则当分布式文件系统对客户端上传的数据进行分块存储时，针对当前需要存储的数据块，可以基于前一个数据块对当前需要存储的数据块进行加载，得到对应的数据标识以及存储对象，然后再对存储对象进行存储，通过将前一个数据块所对应的信息追加到当前数据块所对应的数据标识中，在不增加时间复杂度、不影响系统性能的情况下保证了数据校验的完整性，同时在完成完整的数据块的存储、校验之后，可以向客户端所上传的全量数据所对应的数据标识，不仅保证了数据上传的完整性，而且可以保证分布式文件系统中对象存储的数据块的完整性和可靠性。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。

参照图2，示出了本发明实施例中提供的一种数据存储的校验装置的结构框图，具体可以包括如下模块：

数据获取模块201，用于响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

存储对象获取模块202，用于获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

存储对象生成模块203，用于根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

标识返回模块204，用于若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

在一种可选实施例中，所述第一存储对象为经过序列化后的存储对象，所述存储对象生成模块203具体用于：

对所述第一存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标存储对象；

采用所述第一目标存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象。

在一种可选实施例中，所述标识返回模块204具体用于：

对所述第二存储对象进行序列化，获得与所述第n块数据对应的序列化后的第二目标存储对象；

对所述第二目标存储对象进行持久化，若对所述第二目标存储对象持久化存储成功，则将所述目标存储标识返回所述客户端以表征所述第n块数据存储校验成功。

在一种可选实施例中，所述第一存储对象为经过序列化后的第一MD5存储对象，所述存储对象生成模块203具体用于：

对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

在一种可选实施例中，所述标识返回模块204具体用于：

对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

若对所述第二目标MD5存储对象持久化存储成功，则将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

在一种可选实施例中，应用于分布式文件系统，所述分布式文件系统至少包括MD5增量计算器、序列化处理计算器以及持久化存储器，所述第一存储对象为经过序列化后的第一MD5存储对象，所述标识返回模块204具体用于：

通过所述MD5增量计算器将所述第一MD5存储对象传输至所述序列化处理计算器；

通过所述序列化处理计算器对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

通过所述MD5增量计算器采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象；

其中，所述标识返回模块204具体用于：

通过所述序列化处理计算器获取所述MD5增量计算器发送的所述第二MD5存储对象，并对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

通过所述持久化存储器获取所述MD5增量计算器发送的所述第二目标MD5存储对象，并对所述第二目标MD5存储对象进行持久化存储，若对所述第二目标MD5存储对象持久化存储成功，则生成针对所述第二目标MD5存储对象的持久化成功信息；

通过所述MD5增量计算器响应于获取到所述持久化成功信息，将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

另外，本发明实施例还提供了一种电子设备，包括：处理器，存储器，存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述数据存储的校验方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述数据存储的校验方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器（Read-Only Memory，简称ROM）、随机存取存储器（RandomAccess Memory，简称RAM）、磁碟或者光盘等。

图3为实现本发明各个实施例的一种电子设备的硬件结构示意图。

该电子设备300包括但不限于：射频单元301、网络模块302、音频输出单元303、输入单元304、传感器305、显示单元306、用户输入单元307、接口单元308、存储器309、处理器310、以及电源311等部件。本领域技术人员可以理解，本发明实施例中所涉及的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

应理解的是，本发明实施例中，射频单元301可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器310处理；另外，将上行的数据发送给基站。通常，射频单元301包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元301还可以通过无线通信系统与网络和其他设备通信。

电子设备通过网络模块302为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元303可以将射频单元301或网络模块302接收的或者在存储器309中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元303还可以提供与电子设备300执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元303包括扬声器、蜂鸣器以及受话器等。

输入单元304用于接收音频或视频信号。输入单元304可以包括图形处理器（Graphics Processing Unit，GPU）3041和麦克风3042，图形处理器3041对在视频捕获模式或图像捕获模式中由图像捕获装置（如摄像头）获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元306上。经图形处理器3041处理后的图像帧可以存储在存储器309（或其它存储介质）中或者经由射频单元301或网络模块302进行发送。麦克风3042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元301发送到移动通信基站的格式输出。

电子设备300还包括至少一种传感器305，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板3061的亮度，接近传感器可在电子设备300移动到耳边时，关闭显示面板3061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上（一般为三轴）加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态（比如横竖屏切换、相关游戏、磁力计姿态校准）、振动识别相关功能（比如计步器、敲击）等；传感器305还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元306用于显示由用户输入的信息或提供给用户的信息。显示单元306可包括显示面板3061，可以采用液晶显示器（LiquidCrystal Display，LCD）、有机发光二极管（Organic Light-Emitting Diode, OLED）等形式来配置显示面板3061。

用户输入单元307可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元307包括触控面板3071以及其他输入设备3072。触控面板3071，也称为触摸屏，可收集用户在其上或附近的触摸操作（比如用户使用手指、触笔等任何适合的物体或附件在触控面板3071上或在触控面板3071附近的操作）。触控面板3071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器310，接收处理器310发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板3071。除了触控面板3071，用户输入单元307还可以包括其他输入设备3072。具体地，其他输入设备3072可以包括但不限于物理键盘、功能键（比如音量控制按键、开关按键等）、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板3071可覆盖在显示面板3061上，当触控面板3071检测到在其上或附近的触摸操作后，传送给处理器310以确定触摸事件的类型，随后处理器310根据触摸事件的类型在显示面板3061上提供相应的视觉输出。可以理解的是，在一种实施例中，触控面板3071与显示面板3061是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板3071与显示面板3061集成而实现电子设备的输入和输出功能，具体此处不做限定。

接口单元308为外部装置与电子设备300连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元308可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到电子设备300内的一个或多个元件或者可以用于在电子设备300和外部装置之间传输数据。

存储器309可用于存储软件程序以及各种数据。存储器309可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如声音播放功能、图像播放功能等）等；存储数据区可存储根据手机的使用所创建的数据（比如音频数据、电话本等）等。此外，存储器309可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器310是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器309内的软件程序和/或模块，以及调用存储在存储器309内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器310可包括一个或多个处理单元；优选的，处理器310可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器310中。

电子设备300还可以包括给各个部件供电的电源311（比如电池），优选的，电源311可以通过电源管理系统与处理器310逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，电子设备300包括一些未示出的功能模块，在此不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质（如ROM/RAM、磁碟、光盘）中，包括若干指令用以使得一台终端（可以是手机，计算机，服务器，空调器，或者网络设备等）执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

本领域普通技术人员可以意识到，结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (15)

1.一种数据存储的校验方法，其特征在于，包括：

响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

2.根据权利要求1所述的方法，其特征在于，所述第一存储对象为经过序列化后的存储对象，所述根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象，包括：

对所述第一存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标存储对象；

采用所述第一目标存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象。

3.根据权利要求1或2所述的方法，其特征在于，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据校验成功，包括：

对所述第二存储对象进行序列化，获得与所述第n块数据对应的序列化后的第二目标存储对象；

对所述第二目标存储对象进行持久化，若对所述第二目标存储对象持久化存储成功，则将所述目标存储标识返回所述客户端以表征所述第n块数据存储校验成功。

4.根据权利要求2所述的方法，其特征在于，所述第一存储对象为经过序列化后的第一MD5存储对象，所述根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象，包括：

对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

5.根据权利要求4所述的方法，其特征在于，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功，包括：

对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

若对所述第二目标MD5存储对象持久化存储成功，则将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

6.根据权利要求1所述的方法，其特征在于，应用于分布式文件系统，所述分布式文件系统至少包括MD5增量计算器以及序列化处理计算器，所述第一存储对象为经过序列化后的第一MD5存储对象，所述对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象，包括：

所述MD5增量计算器将所述第一MD5存储对象传输至所述序列化处理计算器；

所述序列化处理计算器对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

所述MD5增量计算器采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

7.根据权利要求6所述的方法，其特征在于，所述分布式文件系统还包括持久化存储器，所述若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功，包括：

所述序列化处理计算器获取所述MD5增量计算器发送的所述第二MD5存储对象，并对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

所述持久化存储器获取所述MD5增量计算器发送的所述第二目标MD5存储对象，并对所述第二目标MD5存储对象进行持久化存储，若对所述第二目标MD5存储对象持久化存储成功，则生成针对所述第二目标MD5存储对象的持久化成功信息；

所述MD5增量计算器响应于获取到所述持久化成功信息，将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

8.一种数据存储的校验装置，其特征在于，包括：

数据获取模块，用于响应于获取到客户端发送的数据追加写入请求，获取与所述数据追加写入请求对应的第n块数据，所述n大于1；

存储对象获取模块，用于获取与所述第n块数据对应的第n-1块数据对应的第一存储对象；

存储对象生成模块，用于根据所述第一存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象；

标识返回模块，用于若对所述第二存储对象持久化存储成功，则将所述目标数据标识返回所述客户端以表征所述第n块数据存储校验成功。

9.根据权利要求8所述的装置，其特征在于，所述第一存储对象为经过序列化后的存储对象，所述存储对象生成模块具体用于：

对所述第一存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标存储对象；

采用所述第一目标存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标数据标识以及第二存储对象。

10.根据权利要求8或9所述的装置，其特征在于，所述标识返回模块具体用于：

对所述第二存储对象进行序列化，获得与所述第n块数据对应的序列化后的第二目标存储对象；

对所述第二目标存储对象进行持久化，若对所述第二目标存储对象持久化存储成功，则将所述目标存储标识返回所述客户端以表征所述第n块数据存储校验成功。

11.根据权利要求9所述的装置，其特征在于，所述第一存储对象为经过序列化后的第一MD5存储对象，所述存储对象生成模块具体用于：

对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象。

12.根据权利要求11所述的装置，其特征在于，所述标识返回模块具体用于：

对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

若对所述第二目标MD5存储对象持久化存储成功，则将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

13.根据权利要求8所述的装置，其特征在于，应用于分布式文件系统，所述分布式文件系统至少包括MD5增量计算器、序列化处理计算器以及持久化存储器，所述第一存储对象为经过序列化后的第一MD5存储对象，所述标识返回模块具体用于：

通过所述MD5增量计算器将所述第一MD5存储对象传输至所述序列化处理计算器；

通过所述序列化处理计算器对所述第一MD5存储对象进行反序列化处理，获得与所述第n-1块数据对应的反序列化的第一目标MD5存储对象；

通过所述MD5增量计算器采用所述第一目标MD5存储对象对所述第n块数据进行加载，获得与所述第n块数据对应的目标MD5值以及第二MD5存储对象；

其中，所述标识返回模块具体用于：

通过所述序列化处理计算器获取所述MD5增量计算器发送的所述第二MD5存储对象，并对所述第二MD5存储对象进行序列化，获得与所述第n块数据对应的第二目标MD5存储对象；

通过所述持久化存储器获取所述MD5增量计算器发送的所述第二目标MD5存储对象，并对所述第二目标MD5存储对象进行持久化存储，若对所述第二目标MD5存储对象持久化存储成功，则生成针对所述第二目标MD5存储对象的持久化成功信息；

通过所述MD5增量计算器响应于获取到所述持久化成功信息，将所述目标MD5值返回所述客户端以表征所述第n块数据存储校验成功。

14.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；

所述存储器，用于存放计算机程序；

所述处理器，用于执行存储器上所存放的程序时，实现如权利要求1-7任一项所述的方法。

15.一种计算机可读存储介质，其上存储有指令，当由一个或多个处理器执行所述指令时，使得所述处理器执行如权利要求1-7任一项所述的方法。

Images