CN109508255A - 一种数据处理的方法及装置 - Google Patents

Abstract

本申请实施例公开了一种数据处理的方法及装置，通过为第一存储区域分配对应的第二存储区域，其中第一存储区域用于存储源数据，第二存储区域用于存储快照数据，第二存储区域具有第一标识，建立第一存储区域和第二存储区域的映射关系，在对第一存储区域中的源数据进行修改时，在第二存储区域写入快照数据，其中快照数据为修改前的源数据，并将第一标识更新为第二标识。在第一存储区域中的源数据存在修改时，进行修改前源数据的备份，通过第二存储区域的标识来确定第一存储区域中是否存在更新，同时建立第一存储区域和第二存储区域的映射关系，以便快速确定快照数据对应的源数据的存储位置，不需要进行对数据的遍历，有利于快照处理的简化。

Description

一种数据处理的方法及装置

技术领域

本申请涉及计算机领域，尤其涉及一种数据处理的方法及装置。

背景技术

随着计算机的发展，数据备份的重要性也逐渐凸显。在最初的数据备份方式中，数据备份过程会影响业务性能，甚至中断业务，而且备份的数据用于恢复，往往不能满足业务需求。在数据量不断增加时，需要一种新的数据备份和数据保护技术。

快照技术是使用范围广泛的一种数据保护和数据备份的技术，可以基于时间点进行数据保护，通过快照技术可以对用户可定义的存储单元进行在线数据保护，实现数据备份过程用户业务不停顿，即瞬间生成快照，实现零备份窗口的数据备份，从而满足用户对于业务连续性和数据可靠性的要求。

然而，在快照技术中，对快照的处理过程较为繁琐，例如创建过程、读取过程、数据回滚过程等。

发明内容

为了解决现有技术中对快照的处理过程较为繁琐的问题，本申请实施例提供了一种数据处理的方法及装置。

本申请实施例提供了一种数据处理的方法，所述方法包括：

为第一存储区域分配对应的第二存储区域，建立所述第一存储区域和所述第二存储区域的映射关系；所述第一存储区域用于存储源数据，所述第二存储区域用于存储快照数据，所述第二存储区域具有第一标识；

在对所述第一存储区域中的源数据进行修改时，向所述第二存储区域写入快照数据，所述快照数据为修改前的源数据，将所述第一标识更新为第二标识。

可选的，所述方法还包括：

若所述第二存储区域具有第一标识，则根据数据读取请求，以及所述第一存储区域和所述第二存储区域的映射关系，读取所述第二存储区域对应的第一存储区域中的源数据；

若所述第二存储区域具有第二标识，则根据所述数据读取请求，读取所述第二存储区域中的快照数据。

可选的，所述方法还包括：

若所述第二存储区域具有第二标识，则根据数据回滚请求，以及所述第一存储区域和所述第二存储区域的映射关系，将所述快照数据写入所述第二存储区域对应的第一存储区域；

将所述第二标识更新为第一标识。

可选的，所述方法还包括：

在所述第二存储区域创建共享，以便用户对所述快照数据进行访问。

可选的，所述为第一存储区域分配对应的第二存储区域，包括：

根据第一存储区域对应的用户的等级，为所述用户分配对应的存储区域；

在所述用户对应的存储区域中，为所述第一存储区域分配对应的第二存储区域。

本申请实施例提供了一种数据处理的装置，所述装置包括：

关系建立单元，用于为第一存储区域分配对应的第二存储区域，建立所述第一存储区域和所述第二存储区域的映射关系；所述第一存储区域用于存储源数据，所述第二存储区域用于存储快照数据，所述第二存储区域具有第一标识；

数据写入单元，用于在对所述第一存储区域中的源数据进行修改时，向所述第二存储区域写入快照数据，所述快照数据为修改前的源数据；

第一标识更新单元，用于将所述第一标识更新为第二标识。

可选的，所述装置还包括：

第一读取单元，用于若所述第二存储区域具有第一标识，则根据数据读取请求，以及所述第一存储区域和所述第二存储区域的映射关系，读取所述第二存储区域对应的第一存储区域中的源数据；

第二读取单元，用于若所述第二存储区域具有第二标识，则根据所述数据读取请求，读取所述第二存储区域中的快照数据。

可选的，所述装置还包括：

回滚单元，用于若所述第二存储区域具有第二标识，则根据数据回滚请求，以及所述第一存储区域和所述第二存储区域的映射关系，将所述快照数据写入所述第二存储区域对应的第一存储区域；

第二标识更新单元，用于将所述第二标识更新为第一标识。

可选的，所述装置还包括：

数据访问单元，用于在所述第二存储区域创建共享，以便用户对所述快照数据进行访问。

可选的，所述为第一存储区域分配对应的第二存储区域，包括：

根据第一存储区域对应的用户的等级，为所述用户分配对应的存储区域；

在所述用户对应的存储区域中，为所述第一存储区域分配对应的第二存储区域。

本申请实施例提供的一种数据处理的方法及装置，通过为第一存储区域分配对应的第二存储区域，其中第一存储区域用于存储源数据，第二存储区域用于存储快照数据，第二存储区域具有第一标识，建立第一存储区域和第二存储区域的映射关系，在对第一存储区域中的源数据进行修改时，在第二存储区域写入快照数据，其中快照数据为修改前的源数据，并将第一标识更新为第二标识。在第一存储区域中的源数据存在修改时，进行修改前源数据的备份，通过第二存储区域的标识来确定第一存储区域中是否存在更新，同时建立第一存储区域和第二存储区域的映射关系，以便快速确定快照数据对应的源数据的存储位置，不需要进行对数据的遍历，有利于快照处理的简化。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本申请实施例提供的一种数据处理的方法的流程图；

图2为本申请实施例提供的一种数据处理的装置的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

现有技术中，通过快照技术进行数据保护和数据备份，具体的，可以对用户可定义的存储单元中的数据进行在线保护，实现数据备份过程中用户业务不停顿，且零备份窗口的数据备份，从而满足用户对业务连续性和数据可靠性的要求。

在快照技术中，源数据可以存储在第一存储区域中，用于指示数据位置的指针映射到第一存储区域，在对源数据进行修改时，可以将修改前的源数据复制到第二存储区域中，形成快照数据。因此，在需要对源数据进行处理时，可以根据指针映射的位置，确定源数据所在的第一存储区域，在需要对快照数据进行处理时，可以通过对快照数据的遍历，将指针映射到第二存储区域，以便根据指针的映射位置，确定快照数据所在的第二存储区域。然而这种通过指针信息来确定快照数据和源数据的存储位置的方式，通常较为繁琐，导致对数据的处理效率低下。

为了解决上述技术问题，本申请实施例提供的一种数据处理的方法及装置，通过为第一存储区域分配对应的第二存储区域，其中第一存储区域用于存储源数据，第二存储区域用于存储快照数据，第二存储区域具有第一标识，建立第一存储区域和第二存储区域的映射关系，在对第一存储区域中的源数据进行修改时，在第二存储区域写入快照数据，其中快照数据为修改前的源数据，并将第一标识更新为第二标识。在第一存储区域中的源数据存在修改时，进行修改前源数据的备份，通过第二存储区域的标识来确定第一存储区域中是否存在更新，同时建立第一存储区域和第二存储区域的映射关系，以便快速确定快照数据对应的源数据的存储位置，有利于数据处理过程的简化。

下面结合附图，对本申请实施例提供的一种数据处理的方法进行介绍，参考图1所示为本申请实施例提供的一种数据处理的方法的流程图，具体的，可以包括以下步骤。

S101，为第一存储区域分配对应的第二存储区域。

本申请实施例中，第一存储区域可以用于存储源数据，其中源数据是用户想要保护和备份的数据。第一存储区域是存储设备中的区域，存储设备例如固态硬盘(SolidState Drives，SSD)或闪存器件等，也可以是网络存储设备，例如存储区域网络(StorageArea Network，SAN)设备，在SAN设备中可以有多个磁盘阵列(Redundant Arrays ofIndependent Disks，RAID)，在磁盘阵列中，可以有供用户使用的存储空间，用逻辑单元号(Logical Unit Number，LUN)表示，LUN又可以称为卷，在LUN中可以存储有源数据，该LUN成为源卷。

第二存储区域可以用于存储快照数据，快照数据是源数据的备份数据，用于对数据进行恢复。第二存储区域是存储设备中的区域，第二存储区域与第一存储区域可以位于同一存储设备中，也可以位于不同存储设备中。具体的，快照数据可以存储于LUN中，该LUN成为快照卷。

第一存储区域可以是用户指定的区域，用户通过发送第二存储区域分配请求，实现对第一存储区域中的数据的在线保护。

为第一存储区域分配对应的第二存储区域，可以具体为，在存储设备中为第一存储区域分配对应的第二存储区域。

为第一存储区域分配对应的第二存储区域，也可以具体为，根据第一存储区域对应的用户的等级，为用户分配对应的存储区域，在用户对应的存储区域中，为第一存储区域分配对应的第二存储区域。其中，用户的等级可以在用户注册时确定，例如普通用户和管理员对应的用户的等级不同，对应的存储区域也不同，存储区域的容量也可以不同。

在用户请求对第一存储区域进行数据保护之前，可以先进行注册和登录，以便进行存储区域的分配。具体的，用户可以通过客户端进行信息的注册，在完成注册后，可以使用客户端通过网络登录服务器，在对用户的身份进行验证后，为用户连接存储设备，并为用户分配存储区域。用户的存储区域可以与用户的等级相关，例如等级较高的用户，可以对应较大容量的存储区域，等级较低的用户，可以对应较小容量的存储区域。这是因为，等级较高的用户，通常对于存储区域的需求较大，根据用户的等级进行存储区域的分配，可以有效利用存储区域，提高存储空间的利用率。

在为第一存储区域分配对应的第二存储区域之后，建立第一存储区域和第二存储区域的映射关系，该映射关系可以通过映射视图的形式体现，也可以通过其他形式体现。第二存储区域具有的第一标识和映射视图可以存储在第二存储区域中。

为第一存储区域分配的对应的第二存储区域，可以对应有第一标识，第一标识用于指示第一存储区域不存在更新。第一标识可以在为确定第一存储区域对应的第二存储区域时，为第二存储区域设置第一标识。第一标识可以是0，表示第一存储区域中不存在更新。

S102，在对第一存储区域中的源数据进行修改时，向第二存储区域写入快照数据，将第二存储区域的第一标识更新为第二标识。

在本申请实施例中，用户可以对第一存储区域中的源数据进行读写操作，例如对源数据进行修改。此时用户可以发送处理请求，该处理请求可以加入请求队列，处理器可以获取请求队列中的处理请求，将处理请求划分为快照块，再将快照块组装成通用处理请求，使处理器中的核心态底层的处理模块根据处理请求对源数据进行处理，在完成处理后，可以通过用户态的模块将处理结果告知用户，该过程可以从而简化数据处理以及快照形成的流程。

在对源数据进行修改前，可以进行源数据的备份，即向第二存储区域写入快照数据，其中快照数据为修改前的源数据。具体的，可以根据快照块的处理请求进行源数据的备份。在向第二存储区域写入快照数据时，还可以记录写入时间，即记录对源数据的备份时间，实现某个时间点的数据备份。

在向第二存储区域写入快照数据时，可以将第二存储区域的第一标识更新为第二标识，第二标识用于表征第一存储区域中的源数据存在更新。例如第二标识可以是1，表征第一存储区域中的源数据存在更新。第二存储区域具有的第二标识可以存储在第二存储区域中。

在第二存储区域中写入快照数据后，还可以对快照数据进行处理，例如对快照数据进行读取、删除会回滚等。具体的，可以根据第二存储区域对应的标识以及第一存储区域和第二存储区域的映射关系进行。

作为一种可能的实现方式，若第二存储区域具有第一标识，说明第一存储区域中的源数据不存在更新，则可以根据数据读取请求，以及第一存储区域和第二存储区域的映射关系，读取第二存储区域对应的第一存储区域中的源数据。若第二存储区域具有第二标识，说明第一存储区域中的源数据存在更新，第二存储区域中存储有快照数据，此时可以直接读取第二存储区域中的快照数据。

对快照数据的删除，可以响应于用户的删除请求，对第二存储区域中的快照数据进行删除，也可以在存储区域的容量不足时，删除写入时间最早的快照数据，以释放存储区域。

作为另一种可能的实现方式，若第二存储区域具有第二标识，说明第一存储区域中的源数据存在更新，第二存储区域中存储有快照数据，则根据数据回滚请求，以及第一存储区域和第二存储区域的映射关系，将快照数据写入第二存储区域对应的第一存储区域，实现第一存储区域中的源数据的恢复，即实现第二存储区域中的快照数据的回滚。在对第二存储区域中的快照数据进行回滚后，可以将第二标识更新为第一标识，以表征第一存储区域中不存在更新。

对于快照数据的访问，可以在第二存储区域创建共享，以便用户对快照数据进行访问。具体的，用户可以通过客户端对快照数据进行访问。举例来说，若客户端为Windows操作系统，则第二存储区域可以基于快照数据的目录创建CIFS共享，以便在客户端将CIFS共享进行挂载，进而访问快照数据。如客户端为UNIX、Linux、AIX、HP-UX等操作系统，则第二存储区域可以基于快照数据的目录创建网络文件系统(Network File System，NFS)共享，以便在客户端将NFS共享进行挂载，进而访问快照数据。

本申请实施例提供的一种数据处理的方法，通过为第一存储区域分配对应的第二存储区域，其中第一存储区域用于存储源数据，第二存储区域用于存储快照数据，第二存储区域具有第一标识，建立第一存储区域和第二存储区域的映射关系，在对第一存储区域中的源数据进行修改时，在第二存储区域写入快照数据，其中快照数据为修改前的源数据，并将第一标识更新为第二标识。在第一存储区域中的源数据存在修改时，进行修改前源数据的备份，通过第二存储区域的标识来确定第一存储区域中是否存在更新，同时建立第一存储区域和第二存储区域的映射关系，以便快速确定快照数据对应的源数据的存储位置，不需要进行对数据的遍历，有利于快照处理的简化。

基于以上实施例提供的一种数据处理的方法，本申请实施例还提供了一种事务处理的装置，下面结合附图来详细说明其工作原理。

参见图2，该图为本申请实施例提供的一种数据处理的装置的结构框图，该装置包括：

关系建立单元110，用于为第一存储区域分配对应的第二存储区域，建立所述第一存储区域和所述第二存储区域的映射关系；所述第一存储区域用于存储源数据，所述第二存储区域用于存储快照数据，所述第二存储区域具有第一标识；

数据写入单元120，用于在对所述第一存储区域中的源数据进行修改时，向所述第二存储区域写入快照数据，所述快照数据为修改前的源数据；

第一标识更新单元130，用于将所述第一标识更新为第二标识。

可选的，所述装置还包括：

第一读取单元，用于若所述第二存储区域具有第一标识，则根据数据读取请求，以及所述第一存储区域和所述第二存储区域的映射关系，读取所述第二存储区域对应的第一存储区域中的源数据；

第二读取单元，用于若所述第二存储区域具有第二标识，则根据所述数据读取请求，读取所述第二存储区域中的快照数据。

可选的，所述装置还包括：

回滚单元，用于若所述第二存储区域具有第二标识，则根据数据回滚请求，以及所述第一存储区域和所述第二存储区域的映射关系，将所述快照数据写入所述第二存储区域对应的第一存储区域；

第二标识更新单元，用于将所述第二标识更新为第一标识。

可选的，所述装置还包括：

数据访问单元，用于在所述第二存储区域创建共享，以便用户对所述快照数据进行访问。

可选的，所述为第一存储区域分配对应的第二存储区域，包括：

根据第一存储区域对应的用户的等级，为所述用户分配对应的存储区域；

在所述用户对应的存储区域中，为所述第一存储区域分配对应的第二存储区域。

本申请实施例提供的一种数据处理的方法及装置，通过为第一存储区域分配对应的第二存储区域，其中第一存储区域用于存储源数据，第二存储区域用于存储快照数据，第二存储区域具有第一标识，建立第一存储区域和第二存储区域的映射关系，在对第一存储区域中的源数据进行修改时，在第二存储区域写入快照数据，其中快照数据为修改前的源数据，并将第一标识更新为第二标识。在第一存储区域中的源数据存在修改时，进行修改前源数据的备份，通过第二存储区域的标识来确定第一存储区域中是否存在更新，同时建立第一存储区域和第二存储区域的映射关系，以便快速确定快照数据对应的源数据的存储位置，不需要进行对数据的遍历，有利于快照处理的简化。

当介绍本申请的各种实施例的元件时，冠词“一”、“一个”、“这个”和“所述”都意图表示有一个或多个元件。词语“包括”、“包含”和“具有”都是包括性的并意味着除了列出的元件之外，还可以有其它元件。

需要说明的是，本领域普通技术人员可以理解实现上述方法实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccess Memory,RAM)等。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元及模块可以是或者也可以不是物理上分开的。另外，还可以根据实际的需要选择其中的部分或者全部单元和模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种数据处理的方法，其特征在于，所述方法包括：

为第一存储区域分配对应的第二存储区域，建立所述第一存储区域和所述第二存储区域的映射关系；所述第一存储区域用于存储源数据，所述第二存储区域用于存储快照数据，所述第二存储区域具有第一标识；

在对所述第一存储区域中的源数据进行修改时，向所述第二存储区域写入快照数据，所述快照数据为修改前的源数据，将所述第一标识更新为第二标识。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

若所述第二存储区域具有第一标识，则根据数据读取请求，以及所述第一存储区域和所述第二存储区域的映射关系，读取所述第二存储区域对应的第一存储区域中的源数据；

若所述第二存储区域具有第二标识，则根据所述数据读取请求，读取所述第二存储区域中的快照数据。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

若所述第二存储区域具有第二标识，则根据数据回滚请求，以及所述第一存储区域和所述第二存储区域的映射关系，将所述快照数据写入所述第二存储区域对应的第一存储区域；

将所述第二标识更新为第一标识。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在所述第二存储区域创建共享，以便用户对所述快照数据进行访问。

5.根据权利要求1至4任意一项所述的方法，其特征在于，所述为第一存储区域分配对应的第二存储区域，包括：

根据第一存储区域对应的用户的等级，为所述用户分配对应的存储区域；

在所述用户对应的存储区域中，为所述第一存储区域分配对应的第二存储区域。

6.一种数据处理的装置，其特征在于，所述装置包括：

关系建立单元，用于为第一存储区域分配对应的第二存储区域，建立所述第一存储区域和所述第二存储区域的映射关系；所述第一存储区域用于存储源数据，所述第二存储区域用于存储快照数据，所述第二存储区域具有第一标识；

数据写入单元，用于在对所述第一存储区域中的源数据进行修改时，向所述第二存储区域写入快照数据，所述快照数据为修改前的源数据；

第一标识更新单元，用于将所述第一标识更新为第二标识。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

第一读取单元，用于若所述第二存储区域具有第一标识，则根据数据读取请求，以及所述第一存储区域和所述第二存储区域的映射关系，读取所述第二存储区域对应的第一存储区域中的源数据；

第二读取单元，用于若所述第二存储区域具有第二标识，则根据所述数据读取请求，读取所述第二存储区域中的快照数据。

8.根据权利要求6所述的装置，其特征在于，所述装置还包括：

回滚单元，用于若所述第二存储区域具有第二标识，则根据数据回滚请求，以及所述第一存储区域和所述第二存储区域的映射关系，将所述快照数据写入所述第二存储区域对应的第一存储区域；

第二标识更新单元，用于将所述第二标识更新为第一标识。

9.根据权利要求6所述的装置，其特征在于，所述装置还包括：

数据访问单元，用于在所述第二存储区域创建共享，以便用户对所述快照数据进行访问。

10.根据权利要求6至9任意一项所述的装置，其特征在于，所述为第一存储区域分配对应的第二存储区域，包括：

根据第一存储区域对应的用户的等级，为所述用户分配对应的存储区域；

在所述用户对应的存储区域中，为所述第一存储区域分配对应的第二存储区域。