CN111782148B - 数据存储控制方法和装置、以及电子设备和存储介质 - Google Patents

Abstract

本公开提供了一种数据存储控制方法，包括：获取待存储数据及待存储数据的属性信息，属性信息包括业务属性信息；根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系；根据关联关系，确定针对待存储数据的在线存储空间；以及将待存储数据存储至其所针对的在线存储空间，其中，针对待存储数据的在线存储空间的性能大小与关联关系的强弱正相关。

Description

数据存储控制方法和装置、以及电子设备和存储介质

技术领域

本公开涉及数据处理领域，更具体地，涉及一种数据存储控制方法和装置、以及电子设备和存储介质。

背景技术

随着线上业务的发展，主机生产数据伴随着业务量以每年仅20％的速率增长。在线存储介质(例如磁盘)价格昂贵且存储容量有限。

在实现本公开构思的过程中，发明人发现相关技术中至少存在以下问题：相关技术在存储数据时，往往对需要存储的数据进行混合存放，并将需要存储的数据存放于有存储空间的存储介质，而并不进行存储介质的区分。但对于需要联机访问的数据而言，该联机访问的数据的存储对存储介质的性能要求高。采用混合存放的方式，会造成高性能资源的浪费。由于存储过程中不对存储介质进行区分，因此同时存在无法高效利用滚动置换下的存储介质的技术问题。

发明内容

有鉴于此，本公开提供了一种能够区分存储介质，以提高存储介质的高效利用的数据存储控制方法和装置、以及电子设备和存储介质。

本公开一方面提供了一种数据存储控制方法，包括：获取待存储数据及待存储数据的属性信息，该属性信息包括业务属性信息；根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系；根据关联关系，确定针对待存储数据的在线存储空间；以及将待存储数据存储至其所针对的在线存储空间，其中，针对待存储数据的在线存储空间的性能大小与关联关系的强弱正相关。

根据本公开的实施例，上述属性信息还包括数据类型；将待存储数据存储至其所针对的在线存储空间包括：根据待存储数据的数据类型，确定待存储数据所针对的在线存储空间中与待存储数据匹配的存储组；以及将待存储数据存储至其所匹配的存储组中，其中，待存储数据所针对的在线存储空间根据数据类型分配有至少一个存储组。

根据本公开的实施例，在待存储数据的数据类型为第一数据类型的情况下，上述数据存储控制方法还包括：确定存储于在线存储空间的待存储数据的被访问频率；以及在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间。

根据本公开的实施例，上述属性信息还包括用于表征数据生命周期的生命周期信息；在待存储数据的数据类型为第二数据类型的情况下，上述数据存储控制方法还包括：确定待存储数据存储于在线存储空间的时长是否超过待存储数据的生命周期；以及在超过待存储数据的生成周期的情况下，将待存储数据迁移至离线存储空间。

根据本公开的实施例，在待存储数据的数据类型为第三数据类型时，上述数据存储控制方法还包括：确定存储于在线存储空间的待存储数据的被访问频率；以及在被访问频率低于预定频率的情况下，删除待存储数据。

根据本公开的实施例，在待存储数据的数据类型为目标类型的情况下，上述数据存储控制方法还包括在将待存储数据存储至其所针对的在线存储空间之后：将待存储数据从其所针对的在线存储空间迁移至离线存储空间。

根据本公开的实施例，上述属性信息还包括用于表征数据生命周期的生命周期信息；上述数据存储控制方法还包括：待存储数据存储于在线存储空间的时长未超过待存储数据的生命周期的情况下，确定存储于在线存储空间的待存储数据的被访问频率；在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间；以及在待存储数据存储于在线存储空间的时长与存储于离线存储空间的时长之和超过待存储数据的生命周期的情况下，删除待存储数据。

根据本公开的实施例，上述业务属性信息包括：联机属性、批量属性、移行变形属性；上述业务属性信息用于表征业务生成待存储数据的条件。

本公开的另一方面提供了一种数据存储控制装置，该装置包括：数据获取模块，用于获取待存储数据及待存储数据的属性信息，该属性信息包括业务属性信息；关联关系确定模块，根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系；存储空间确定模块，用于根据关联关系，确定针对待存储数据的在线存储空间；以及存储执行模块，用于将待存储数据存储至其所针对的在线存储空间，其中，针对待存储数据的在线存储空间的性能大小与关联关系的强弱正相关。

本公开的另一方面提供了一种电子设备，包括：一个或多个处理器；以及存储装置，用于存储一个或多个程序，其中，当一个或多个程序被一个或多个处理器执行时，使得一个或多个处理器执行上述的数据存储控制方法。

本公开的另一方面提供了一种计算机可读存储介质，存储有计算机可执行指令，所述指令在被处理器执行时用于执行如上所述的数据存储控制方法。

本公开的另一方面提供了一种计算机程序，所述计算机程序包括计算机可执行指令，所述指令在被执行时用于实现如上所述的数据存储控制方法。

根据本公开的实施例，至少可以部分地解决相关技术中因数据混合存放导致地高性能资源被浪费及无法高效利用滚动置换下的存储介质的技术问题。本公开实施例通过根据待存储数据的业务属性信息来确定与业务的关联关系，并将关联关系强的待存储数据存储于性能高的在线存储空间，可以至少部分地提高高性能资源的利用率，并实现滚动置换下的存储介质的充分利用。

附图说明

通过以下参照附图对本公开实施例的描述，本公开的上述内容以及其他目的、特征和优点将更为清楚，在附图中：

图1示意性示出了根据本公开实施例的数据存储控制方法和装置、以及电子设备和存储介质的应用场景；

图2示意性示出了根据本公开第一实施例的数据存储控制方法的流程图；

图3示意性示出了根据本公开实施例的将待存储数据存储至其所针对的在线存储空间的流程图；

图4示意性示出了根据本公开第二实施例的数据存储控制方法的流程图；

图5示意性示出了根据本公开第三实施例的数据存储控制方法的流程图；

图6示意性示出了根据本公开第四实施例的数据存储控制方法的流程图；

图7示意性示出了根据本公开第五实施例的数据存储控制方法的流程图；

图8示意性示出了根据本公开实施例的数据存储控制方法在具体场景下的流程图；

图9示意性示出了根据本公开实施例的数据存储控制装置的结构框图；以及

图10示意性示出了本公开实施例的适于执行数据存储控制方法的电子设备的结构框图。

具体实施方式

以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。

在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。

在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。

在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。

本公开的实施例提供了一种数据存储控制方法，包括：获取待存储数据及待存储数据的属性信息，该属性信息包括业务属性信息；根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系；根据关联关系，确定针对待存储数据的在线存储空间；以及将待存储数据存储至其所针对的在线存储空间，其中，针对待存储数据的在线存储空间的性能大小与关联关系的强弱正相关。

图1示意性示出了根据本公开实施例的数据存储控制方法和装置、以及电子设备和存储介质的应用场景。需要注意的是，图1所示仅为可以应用本公开实施例的应用场景的示例，以帮助本领域技术人员理解本公开的技术内容，但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。

如图1所示，该实施例的应用场景100例如可以包括终端设备101、102、103，网络104和存储器。其中，存储器例如可以包括在线存储器和离线存储器。在线存储器例如可以为包括磁盘105，离线存储器例如可以包括磁带106。网络104用以在终端设备101、102、103和存储器之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路等等。

终端设备101、102、103可以通过执行各种业务(例如交易业务、表单提交业务等)，可以产生大量数据。为了便于在后续运行过程中调用该些产生的数据。终端设备101、102、103可以通过网络104将产生的数据存储至(或写入)存储器中。

在一实施例中，终端设备101、102、103例如可以是具有处理功能且安装有客户端应用的各种电子设备。其中，电子设备包括但不限于智能手机、平板电脑、膝上型便携计算机、台式计算机、服务器等等。安装的客户端应用包括但不限于：交易应用(具体可以为交易系统)、网络通信类应用、网页浏览类应用等。在一实施例中，该终端设备例如可以将客户端应用运行过程产生的数据存储至存储器中。

其中，存储器例如可以包括购入时间不同和/或性能不同的多个存储器。为了提高高性能存储器的利用率，例如可以将该多个存储器根据性能高低排序。终端设备101、102、103将产生的数据存储至存储器时，例如可以依据数据被访问时所需的性能，将对数据进行分类，并根据分类结果确定存储的存储器。以此将数据存储至能够满足该数据所需性能的存储器中。

根据本公开的实施例，考虑到若产生数据的业务与产生的数据的关联关系强，则在一定程度上可以反映该数据被访问时所需的性能高。因此，该实施例还可以依据数据与业务的关联关系，来确定用于存储数据的存储空间。

根据本公开的实施例，为了避免因过期数据占用过多的在线存储器，该实施例的终端设备101、102、103例如还可以在数据访问频率低，或数据的生命周期到期时，将存储于在线存储器中的数据转移至离线存储器，以此进一步提高在线存储器的利用效率。

需要说明的是，本公开实施例的数据存储控制方法一般可以由该终端设备执行。相应地，本公开实施例的数据存储控制方法一般可以设置于该终端设备中。

应该理解，图1中的终端设备、网络和存储器的类型和数目仅仅是示意性的。根据实现需要，可以具有任意类型和数目的终端设备、网络和存储器。

以下将结合图2～图8对本公开实施例的数据存储控制方法进行详细描述。

图2示意性示出了本公开第一实施例的数据存储控制方法的流程图。

如图2所示，该实施例的数据存储控制方法例如可以包括操作S210～操作S240。

在操作S210，获取待存储数据及待存储数据的属性信息，该属性信息包括业务属性信息。

根据本公开的实施例，待存储数据例如可以为终端设备在执行任一业务的任一阶段所产生的数据。该所产生的数据例如可以包括表单数据、文件数据、音频数据、图像数据等。

待存储数据的属性信息例如可以包括：数据属性信息和业务属性信息等。其中，数据属性信息例如可以包括数据类型、数据产生时间、数据大小、表征数据生命周期的生命周期信息等。业务属性信息例如可以包括：生成待存储数据的业务的业务类型、业务生成待存储数据的条件等。其中，业务生成待存储数据的条件包括生成时段、生成时的场景等。示例性地，根据该业务生成待存储数据的条件，该业务属性信息例如可以分为“联机”属性、“批量”属性和“移行变形”属性。其中，“联机”属性指业务在业务执行高峰时生成的、对性能要求高的数据所具有的属性。“批量”属性指业务在夜间集中性地批量生成的批量数据所具有的属性。“移行变形”属性指业务在特殊场景下生成的数据(例如在终端设备迁移应用数据时生成的移行数据、对数据进行变形操作以使得数据脱密时生成的变形数据等)所具有的属性。可以理解的是，待存储数据的属性信息仅作为示例以利于理解本公开，本公开对此不作限定。

在操作S220，根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系。

根据本公开的实施例，该操作S220具体可以是根据生成待存储数据时，终端设备所执行的业务类型、终端设备执行业务的执行时段、执行业务的场景等，来确定待存储数据与生成待存储数据的业务的关联关系。

根据本公开的实施例，该操作S220例如可以根据业务属性信息，将待存储数据划分为多个数据组中的其中一组，属于同一个数据组的两个数据各自与业务的关联关系相近。然后再根据待存储数据所属的数据组，来确定待存储数据与业务的关联关系。

示例性地，多个数据组例如可以包括“联机”数据组、“批量”数据组和“移行、变形”数据组。其中，在待存储数据的业务属性信息包括“联机”属性时，待存储数据被划分至“联机”数据组。在待存储数据的业务属性信息包括“批量”属性时，待存储数据被划分至“批量”数据组。在待存储数据的业务属性信息包括“移行变形”属性时，则被划分至“移行变形”数据组。在待存储数据分别属于“联机”数据组、“批量”数据组和“移行、变形”数据组时，待存储数据与生成待存储数据的业务的关联关系逐渐减弱。

在操作S230，根据关联关系，确定针对待存储数据的在线存储空间。

根据本公开的实施例，在线存储空间例如可以包括云盘、网盘、磁盘等。

根据本公开的实施例，为了便于提高高性能存储空间的利用率，该实施例的数据存储控制方法例如可以事先对终端设备可以访问的多个在线存储空间根据性能高低进行依次排序。其中，考虑到与业务的关联关系强的数据，被访问的频率较高。则为了保证待存储数据的访问速率，可以将与业务的关联关系强的待存储数据存储于性能高的在线存储空间中，即可以存储于排序靠前的在线存储空间中。因此，针对待存储数据的在线存储空间的性能大小与关联关系的强弱正相关。

根据本公开的实施例，在线存储空间的性能高低例如可以根据存储空间的以下至少一个指标来确定：使用率、饱和度、IOPS、吞吐量和响应时间。其中，使用率指在线存储空间处理I/O的时间百分比。饱和度指在线存储空间处理I/O的繁忙程度。IOPS(Input/OutputPer Second)指在线存储空间每秒的I/O请求书。吞吐量指在线存储空间每秒的I/O请求大小。响应时间指I/O请求自发出到收到在线存储空间的响应的间隔时间。其中，考虑到滚动置换下的在线存储空间一般因老化而性能较低，因此，置换下的在线存储空间的排序靠后。

根据本公开的实施例，在通过将待存储数据划分至不同的数据组来进行关联关系的确定时，该实施例同样可以将在线存储空间根据性能高低划分为多个存储空间组，该存储空间组的个数与数据组的个数相等。同一存储空间组包括的存储空间组的性能相近。相应地，操作S230可以是根据关联关系，确定针对待存储数据的存储空间组。其中，该在线存储空间组的划分例如可以通过在主机I/O定义配置里根据在线存储空间的地址进行分组定义来实现。

示例性地，可以将在线存储空间根据性能高低划分为三个存储空间组，得到性能由高至低排列的“联机”存储空间组、“批量”存储空间组和“移行变形”存储空间组，以分别作为针对“联机”数据组中的数据的在线存储空间、针对“批量”数据组中的数据的在线存储空间和针对“移行变形”数据组中的数据的在线存储空间。

在操作S240，将待存储数据存储至其所针对的在线存储空间。

根据本公开的实施例，该操作S240例如可以包括：终端设备将待存储数据通过网络发送给待存储数据所针对的在线存储空间。或者，终端设备通过网络，将待存储数据写入待存储数据所针对的在线存储空间。

综上可知，本公开实施例通过根据待存储数据的业务属性信息来确定与业务的关联关系，并将关联关系强的待存储数据存储于性能高的在线存储空间，可以实现数据分组分介质的管理，避免数据间性能的影响，同时最大限度的提高性能高的在线存储空间的利用率。

根据本公开的实施例，为了进一步提高数据存储管理的有效性，该实施例还可以在确定数据与业务的关联关系后，对属于同一数据组的数据再进行二次分类。相应地，可以将属于同一在线存储空间组中的在线存储空间分配为至少一个存储组，每个存储组用于存储二次分类得到的一种类型的数据。

图3示意性示出了根据本公开实施例的将待存储数据存储至其所针对的在线存储空间的流程图。

如图3所示，该实施例的将待存储数据存储至其所针对的在线存储空间的操作S240例如可以包括操作S341～操作S342。

在操作S341，根据待存储数据的数据类型，确定待存储数据所针对的在线存储空间中与待存储数据匹配的存储组。

根据本公开的实施例，在确定数据与业务的关联关系后，可以对关联关系相近的、属于同一数据组的数据再根据数据类型进行分类。数据所针对的在线存储空间分配有至少一个存储组。该分配的每个存储组用于对应存储一个类型的数据。该至少一个存储组的分配及与存储组对应的数据的类型可以通过在主机I/O中定义配置来实现，每个存储组以对应的数据的类型为索引。相应地，该操作S341可以根据待存储数据的数据类型来查找得到以该数据类型为索引的存储组，得到与该待存储数据匹配的存储组。

根据本公开的实施例，数据类型例如可以根据数据的格式来确定。例如，在待存储数据为文件数据时，数据类型具体可以为文件的扩展名的类型。例如，数据类型例如可以包括log类型、sys类型、exe类型、tmp类型、dump类型等。在数据类型为log类型时，待存储数据具体为Log文件。在数据类型为sys类型时，待存储数据具体为系统文件。在数据类型为exe类型时，待存储数据具体为可执行文件。在数据类型为tmp类型时，待存储数据具体为临时文件等。可以理解的是，上述数据类型仅作为示例以利于理解本公开，在实际使用中，可以根据实际需求来确定数据类型。

在操作S342，将待存储数据存储至其所匹配的存储组中。

在终端设备确定了待存储数据所针对的在线存储空间中，与待存储数据匹配的存储组后，即可通过网络将待存储数据发送给匹配的存储组。或者，终端设备可以通过网络，将待存储数据写入该匹配的存储组中。

根据本公开的实施例，在待存储数据所针对的在线存储空间包括多个磁盘时，还可以为每个磁盘分配至少一个存储组，至少一个磁盘具有与待存储数据的数据类型匹配的存储组。相应地，与待存储数据匹配的存储组有至少一个。在存储待存储数据时，可以将待存储数据存储至匹配的至少一个存储组中剩余容量最大的存储组，以此保证该至少一个磁盘存储的数据均匀分布。

根据本公开的实施例，考虑到终端设备执行业务时所产生的大量数据中，有些数据仅是作为备份的数据，或者很少会被调用的数据。则为了避免因该些数据存储于在线存储空间导致的空间利用率低的情况，该实施例的数据存储控制方法还可以在将该些待存储的数据存储至其所针对的在线存储空间之后，及时地将该些待存储的数据从其所针对的在线存储空间按迁移至离线存储空间(例如，磁带)中。

示例性地，该些数据例如可以包括各种文件的备份文件。例如，该些数据可以包括用于记载进程的内存镜像的Dump文件，log文件的备份文件等。

根据本公开的实施例，为了更好的利用在线存储空间，避免过多过期或不再使用的数据占据过多在线存储空间。该实施例还可以根据存储于在线存储空间中的数据的访问频率来将已存储的数据划分为“冷数据”和“热数据”。其中，“冷数据”是指访问频率小于预定频率的数据。“热数据”是指访问频率大于等于预定频率的数据。并在确定数据为“冷数据”时，将该数据转移至离线存储空间存储。

图4示意性示出了根据本公开第二实施例的数据存储控制方法的流程图。

如图4所示，该实施例的数据存储控制方法除了操作S210～操作S240外，还可以包括操作S450～操作S460。该操作S450～操作S460在操作S240之后执行。

在操作S450，确定存储于在线存储空间的待存储数据的被访问频率。

根据本公开的实施例，例如可以采用LRU(Least Recently Used)等方法跟踪数据的访问并记录访问频率。或者，当在线存储空间为磁盘时，可以调用磁盘日志，以此来得到磁盘的访问记录。然后再从访问记录中筛选得到访问待存储数据的访问记录。最后根据该待存储数据的访问记录来得到待存储数据的被访问频率。或者，例如可以通过运行部署的报表作业，统计得到各待存储数据的最后访问日期等信息，从而得到待存储数据的被访问频率。

示例性地，该待存储数据的被访问频率例如可以是统计得到的数据最近一次被访问的时刻与当前时刻之间的时间间隔来确定。例如，若该时间间隔为3小时，则该数据的被访问频率为8次/天。

在操作S460，在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间。

根据本公开的实施例，对于不同类型的数据，例如可以设定有不同的预定频率。例如，对于更新较为频繁的数据(例如移行文件等)，可以设定较大的预定频率。对于更新频率低的数据，可以设定较小的预定频率。在数据的被访问频率低于预定频率，则为了在不占用在线存储空间的同时，能够保证能够获取到该数据，可以将该数据迁移至离线存储空间。其中，离线存储空间例如可以包括磁带、光盘等。

根据本公开的实施例，考为了更好的利用在线存储空间，避免过多过期或不再使用的数据占据过多在线存储空间。该实施例还可以根据专家经验为每个待存储数据分配生命周期。相应地，待存储数据的属性信息还包括有用于表征数据生命周期的生命周期信息。在待存储数据的生命周期到期后，将数据转移至离线存储空间存储。

图5示意性示出了根据本公开第三实施例的数据存储控制方法的流程图。

如图5所示，该实施例的数据存储控制方法除了操作S210～操作S240外，还可以包括操作S550～操作S560。

在操作S550，确定待存储数据存储于在线存储空间的时长是否超过待存储数据的生命周期。在操作S560，在超过待存储数据的生成周期的情况下，将待存储数据迁移至离线存储空间。

根据本公开的实施例，对于不同类型的待存储数据，例如可以具有不同长度的生命周期。例如，对于Log文件等更新频繁的数据，生命周期较短。对于系统文件等更新不频繁的数据，为了便于后续调用，可以设定较长的生命周期。

根据本公开的实施例，考虑到有些数据(例如移行文件、变形文件等)若长久未被访问，则后续则不会再被访问调用。因此，在该些数据的访问频率低于预定频率时，可以直接将该些数据自在线存储空间中删除。

图6示意性示出了根据本公开第四实施例的数据存储控制方法的流程图。

如图6所示，该实施例的数据存储控制方法除了操作S210～操作S240外，还可以包括操作S650～操作S660。

在操作S650，确定存储于在线存储空间的待存储数据的被访问频率。根据本公开的实施例，该操作S650与前述的操作S450的实现方式相同，在此不再赘述。

在操作S660，在被访问频率低于预定频率的情况下，删除待存储数据。根据本公开的实施例，终端设备例如可以通过网络来访问在线存储空间，并删除该在线存储空间中的数据。

根据本公开的实施例，为了进一步保证在线存储空间的利用率，还可以在待存储数据的生命周期未结束之前，且待存储数据的被访问频率较低时，将待存储数据转移至离线存储空间。

图7示意性示出了根据本公开第五实施例的数据存储控制方法的流程图。

如图7所示，该实施例的数据存储控制方法除了操作S210～操作S240外，还可以包括操作S750～操作S770。该操作S750～操作S770在操作S240之后执行。

在操作S750，在待存储数据存储于在线存储空间的时长未超过待存储数据的生命周期的情况下，确定存储于在线存储空间的待存储数据的被访问频率。

根据本公开的实施例，可以先确定待存储数据是否达到生命周期。在没有达到生命周期的情况下，再确定待存储数据的被访问频率。考虑到待存储数据在生成后，即通过操作S210～操作S240存储至在线存储空间。因此，在确定待存储数据是否达到生命周期时，可以是确定待存储数据存储于在线存储空间的时长是否超过待存储数据的生命周期。该操作S750可以是先执行前述的操作S550，在未超过生命周期时，再执行前述的操作S450。

在操作S760，在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间。该操作S760与前述的操作S460相似，在此不再赘述。

在操作S770，在待存储数据存储于在线存储空间的时长与存储于离线存储空间的时长之和超过待存储数据的生命周期的情况下，删除待存储数据。

图8示意性示出了根据本公开实施例的数据存储控制方法在具体场景下的流程图。

如图8所示，该实施例的数据存储控制方法例如可以包括操作S801～操作S828。

在操作S801，获取得到生成的数据，并将该数据作为待存储数据。

在操作S802，根据操作S801获取的数据的业务属性信息，判断数据与业务的关联关系，然后根据关联关系确定数据所属的类型(操作S220)。即判断数据属于前述的“联机”数据、“移行变形数据”还是“批量”数据。在数据为“联机”数据的情况下，执行操作S803～操作S813。在数据为“移行变形”数据的情况下，执行操作S820～操作S824。在数据为“批量”数据的情况下，执行操作S825～操作S828。

在操作S803，将“联机”数据存储于联机盘(即前述的“联机”存储空间组)。

在操作S804，判断“联机”数据的数据类型，判断结果包括“联机”数据为数据库文件或属于系统文件。以便于根据判断结果来确定联机盘中与“联机”数据匹配的存储组进行存储。在确定“联机”数据为数据库文件的情况下，执行操作S805～操作S813。在确定“联机”数据为系统文件的情况下，执行操作S814～操作S819。

在操作S805，在确定“联机”数据为数据库文件的情况下，再次细粒度地判断数据类型，判断数据库文件是否为log文件。通过该判断，可以用于对于不同细粒度类型的数据，分配不同的生命周期。

在操作S806，在判断得到数据库文件为Log文件时，再次判断该Log文件的类型，是属于1面文件还是2面文件。其中，1面文件是指生成的原始的Log文件，2面文件是指根据原始的Log文件生成的备份文件。在Log文件属于1面文件时，执行操作S807～操作S811，在Log文件属于2面文件时，执行操作S811～操作S813。

在操作S807，在Log文件为1面文件时，判断该1面文件是否已经生成了24小时，即确定1面文件存储于联机盘的时长是否超过24小时。

在操作S808，在1面文件已经生成了24小时的情况下，将1面文件从联机盘转移至离线存储空间。

在操作S809，在1面文件还未生成24小时的情况下，维持1面文件存储于联机盘的状态，即在线存储状态。

在将1面文件从联机盘转移至离线存储空间之后，执行操作S810，判断1面文件是否已经生成了48小时，即确定1面文件存储于联机盘的时长与数据存储于离线存储空间的时长之和是否超过48小时。若是，则执行操作S811，以删除存储于离线存储空间的1面文件。若否，则维持该1面文件存储于离线存储空间的状态。

在操作S811，将数据自离线存储空间中清理掉，即删除该数据。

在操作S812，在Log文件为2面文件时，直接将该2面文件转移至离线存储空间。

在操作S813，判断该2面文件是否已生成31天，在确定已经生成31天的情况下，执行前述操作S811，以从离线存储空间中删除该2面文件。在确定还未生成31天的情况下，则维持该数据存储于离线存储空间。

在确定“联机”数据为系统文件的情况下，先执行操作S814。在操作S814，再次细粒度地判断数据类型，判断结果包括系统文件是否为Dump文件，以及是否为用户临时文件。在系统文件为Dump文件的情况下，执行操作S814～操作S816。在系统文件为用户临时文件的情况下，执行操作S817～操作S818。在系统文件是除Dump文件和用户临时文件外的其他文件，则直接执行操作S819，维持其他文件存储于联机盘的状态，即维持在线存储状态。

在操作S815，在系统文件为Dump文件的情况下，将系统文件从联机盘转移至离线存储空间，使得该Dump文件作为离线文件。

在操作S816，在转移至离线存储空间后，判断该Dump文件是否已经生成31天。若是，则执行操作S811，若不是，则维持该Dump文件位于联机盘的状态。

在操作S817，在系统文件为用户临时文件时，判断该用户临时文件是否已经生成30天。若是，则执行操作S818，若不是，则将用户临时文件维持位于离线存储空间的状态。

在操作S818，将用户临时文件从联机盘转移至离线存储空间。

在操作S820，将“移行变形”数据存储于变形盘(即前述的“移行变形”存储空间组)。

在操作S821，判断该“移行变形”数据的数据类型，确定该“移行变形”数据属于移行文件，还是属于变形备份文件。在属于移行文件时，执行操作S822～操作S823。在属于变形备份文件时，执行操作S823～操作S824。

在操作S822，判断移行文件是否在最近的21天内未被访问。若是，则执行操作S823，以删除存储于变形盘的移行文件，若不是，则维持该移行文件位于变形盘的状态。

在操作S823，将数据自移行盘中清理掉，即删除该数据。

在操作S824，判断变形备份文件是否在最近的31天内未被访问。若是，则执行操作S823，以删除存储于变形盘的变形备份文件，若不是，则维持该变形备份文件位于变形盘的状态。

在确定数据为“批量”数据的情况下，先执行操作S825。在操作S825，将“批量”数据存储于批量盘(即前述的“批量”存储空间组)。随后执行操作S826～操作S828。

在操作S826，判断该“批量”数据是否长达一年以上未被访问。若是，则执行操作S828，若否，则执行操作S827。

在操作S827，将该“批量”数据保留于批量盘中。

在操作S828，将“批量”数据从批量盘转移至离线存储空间存储。并在存储于离线存储空间后，根据实际需求将该“批量”数据从离线存储空间中清理掉。

图9示意性示出了根据本公开实施例的数据存储控制装置的结构框图。

如图9所示，该实施例的数据存储控制装置900例如可以包括数据获取模块910、关联关系确定模块920、存储空间确定模块930和存储执行模块940。

数据获取模块910用于获取待存储数据及待存储数据的属性信息，该属性信息包括业务属性信息。在一实施例中，该数据获取模块910例如可以用于执行图2描述的操作S210，在此不再赘述。

关联关系确定模块920用于根据待存储数据的业务属性信息，确定待存储数据与生成待存储数据的业务的关联关系。在一实施例中，该关联关系确定模块920例如可以用于执行图2描述的操作S220，在此不再赘述。

存储空间确定模块930用于根据关联关系，确定针对待存储数据的在线存储空间。其中，针对呆存储数据的在线存储空间的性能大小与关联关系的强弱正相关。在一实施例中，该存储空间确定模块930例如可以用于执行图2描述的操作S230，在此不再赘述。

存储执行模块940用于将待存储数据存储至其所针对的在线存储空间。在一实施例中，该存储执行模块940例如可以用于执行图2描述的操作S240，在此不再赘述。

根据本公开的实施例，属性信息还包括数据类型。存储空间确定模块930包括存储组确定子模块和存储子模块。存储组确定子模块用于根据待存储数据的数据类型，确定待存储数据所针对的在线存储空间中与待存储数据匹配的存储组。存储子模块用于将待存储数据存储至其所匹配的存储组中。其中，在线存储空间根据数据类型分配有至少一个存储组。在一实施例中，存储组确定子模块和存储子模块例如可以分别用于执行图3描述的操作S341～操作S342，在此不再赘述。

根据本公开的实施例，上述数据存储控制装置900例如还可以包括访问频率确定模块和数据迁移模块。访问频率确定模块用于在待存储数据的数据类型为第一数据类型的情况下，确定存储于在线存储空间的待存储数据的被访问频率。数据迁移模块用于在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间。在一实施例中，该访问频率确定模块和数据迁移模块例如可以分别用于执行图4描述的操作S450～操作S460，在此不再赘述。

根据本公开的实施例，上述属性信息还包括用于表征数据生命周期的生命周期信息。上述数据存储控制装置900例如还可以包括生命周期确定模块和数据迁移模块。生命周期确定模块用于在待存储数据的数据类型为第二数据类型的情况下，确定待存储数据存储于在线存储空间的时长是否超过待存储数据的生命周期。数据迁移模块用于在超过待存储数据的生成周期的情况下，将待存储数据迁移至离线存储空间。在一实施例中，生命周期确定模块和数据迁移模块例如可以分别用于执行图5描述的操作S550～操作S560，在此不再赘述。

根据本公开的实施例，上述数据存储控制装置900例如还可以包括访问频率确定模块和数据删除模块。访问频率确定模块用于在待存储数据的数据类型为第三数据类型的情况下，确定存储于在线存储空间的待存储数据的被访问频率。数据删除模块用于在被访问频率低于预定频率的情况下，删除待存储数据。在一实施例中，访问频率确定模块和数据删除模块例如可以分别用于执行图6描述的操作S650～操作S660，在此不再赘述。

根据本公开的实施例，上述数据存储控制装置900例如还可以包括数据迁移模块。该数据迁移模块用于在待存储数据的数据类型为目标类型的情况下，将待存储数据从其所针对的在线存储空间迁移至离线存储空间。

根据本公开的实施例，上述属性信息还包括用于表征数据生命周期的生命周期信息。上述数据存储控制装置900例如还可以包括访问频率确定模块、数据迁移模块和数据删除模块。访问频率确定模块用于在待存储数据存储于在线存储空间的时长未超过待存储数据的生命周期的情况下，确定存储于在线存储空间的待存储数据的被访问频率。数据迁移模块用于在被访问频率低于预定频率的情况下，将待存储数据迁移至离线存储空间。数据删除模块用于在待存储数据存储于在线存储空间的时长与存储于离线存储空间的时长之和超过待存储数据的生命周期的情况下，删除待存储数据。在一实施例中，访问频率确定模块、数据迁移模块和数据删除模块例如可以分别用于执行图7描述的操作S750～操作S770，在此不再赘述。

根据本公开的实施例，业务属性信息包括：联机属性、批量属性、移行变形属性；业务属性信息用于表征业务生成待存储数据的条件。

根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

图10示意性示出了根据本公开实施例的适于执行数据存储控制方法的电子设备的结构框图。

如图10所示，根据本公开实施例的电子设备1000包括处理器1001，其可以根据存储在只读存储器(ROM)1002中的程序或者从存储部分1008加载到随机访问存储器(RAM)1003中的程序而执行各种适当的动作和处理。处理器1001例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(ASIC))，等等。处理器1001还可以包括用于缓存用途的板载存储器。处理器1001可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。

在RAM 1003中，存储有电子设备1000操作所需的各种程序和数据。处理器1001、ROM 1002以及RAM 1003通过总线1004彼此相连。处理器1001通过执行ROM 1002和/或RAM1003中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意，所述程序也可以存储在除ROM 1002和RAM 1003以外的一个或多个存储器中。处理器1001也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。

根据本公开的实施例，电子设备1000还可以包括输入/输出(I/O)接口1005，输入/输出(I/O)接口1005也连接至总线1004。电子设备1000还可以包括连接至I/O接口1005的以下部件中的一项或多项：包括键盘、鼠标等的输入部分1006；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分1007；包括硬盘等的存储部分1008；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分1009。通信部分1009经由诸如因特网的网络执行通信处理。驱动器1010也根据需要连接至I/O接口1005。可拆卸介质1011，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器1010上，以便于从其上读出的计算机程序根据需要被安装入存储部分1008。

根据本公开的实施例，根据本公开实施例的方法流程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读存储介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分1009从网络上被下载和安装，和/或从可拆卸介质1011被安装。在该计算机程序被处理器1001执行时，执行本公开实施例的电子设备中限定的上述功能。根据本公开的实施例，上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。

本公开还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。

根据本公开的实施例，计算机可读存储介质可以是非易失性的计算机可读存储介质，例如可以包括但不限于：便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如，根据本公开的实施例，计算机可读存储介质可以包括上文描述的ROM 1002和/或RAM 1003和/或ROM 1002和RAM 1003以外的一个或多个存储器。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。

以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。

Claims (10)

1.一种数据存储控制方法，包括：

获取待存储数据及所述待存储数据的属性信息，所述属性信息包括业务属性信息，所述业务属性信息包括：联机属性、批量属性或移行变形属性，所述业务属性信息用于表征业务生成所述待存储数据的条件；

根据所述待存储数据的业务属性信息，确定所述待存储数据与生成所述待存储数据的业务的关联关系；

根据所述关联关系，确定针对所述待存储数据的在线存储空间；以及

将所述待存储数据存储至其所针对的在线存储空间，

其中，所述联机属性指业务在业务执行高峰时生成的或对性能要求高的数据时所具有的属性，所述批量属性指业务在夜间集中性地批量生成的批量数据时所具有的属性，所述移行变形属性指业务在终端设备迁移应用数据时生成的移行数据或对数据进行变形操作以使得数据脱密时生成变形数据时所具有的属性；所述待存储数据的所述业务属性信息分别为所述联机属性、所述批量属性或所述移行变形属性时，其与生成所述待存储数据的业务的关联关系逐渐减弱，针对所述待存储数据的在线存储空间的性能大小与所述关联关系的强弱正相关。

2.根据权利要求1所述的方法，其中，所述属性信息还包括数据类型；所述将所述待存储数据存储至其所针对的在线存储空间包括：

根据所述待存储数据的数据类型，确定所述待存储数据所针对的在线存储空间中与所述待存储数据匹配的存储组；以及

将所述待存储数据存储至其所匹配的存储组中，

其中，所述待存储数据所针对的在线存储空间根据所述数据类型分配有至少一个存储组。

3.根据权利要求2所述的方法，其中，在所述待存储数据的数据类型为第一数据类型的情况下，所述方法还包括：

确定存储于所述在线存储空间的待存储数据的被访问频率；以及

在所述被访问频率低于预定频率的情况下，将所述待存储数据迁移至离线存储空间。

4.根据权利要求2所述的方法，其中，所述属性信息还包括用于表征数据生命周期的生命周期信息；在所述待存储数据的数据类型为第二数据类型的情况下，所述方法还包括：

确定所述待存储数据存储于所述在线存储空间的时长是否超过所述待存储数据的生命周期；以及

在超过所述待存储数据的生成周期的情况下，将所述待存储数据迁移至离线存储空间。

5.根据权利要求2所述的方法，其中，在所述待存储数据的数据类型为第三数据类型的情况下，所述方法还包括：

确定存储于所述在线存储空间的待存储数据的被访问频率；以及

在所述被访问频率低于预定频率的情况下，删除所述待存储数据。

6.根据权利要求2所述的方法，其中，在所述待存储数据的数据类型为目标类型的情况下，所述方法还包括在将所述待存储数据存储至其所针对的在线存储空间之后：

将所述待存储数据从其所针对的在线存储空间迁移至离线存储空间。

7.根据权利要求2所述的方法，其中，所述属性信息还包括用于表征数据生命周期的生命周期信息；所述方法还包括：

在所述待存储数据存储于所述在线存储空间的时长未超过所述待存储数据的生命周期的情况下，确定存储于所述在线存储空间的待存储数据的被访问频率；

在所述被访问频率低于预定频率的情况下，将所述待存储数据迁移至离线存储空间；以及

在所述待存储数据存储于所述在线存储空间的时长与存储于所述离线存储空间的时长之和超过所述待存储数据的生命周期的情况下，删除所述待存储数据。

8.一种数据存储控制装置，包括：

数据获取模块，用于获取待存储数据及所述待存储数据的属性信息，所述属性信息包括业务属性信息，所述业务属性信息包括：联机属性、批量属性或移行变形属性，所述业务属性信息用于表征业务生成所述待存储数据的条件；

关联关系确定模块，根据所述待存储数据的业务属性信息，确定所述待存储数据与生成所述待存储数据的业务的关联关系；

存储空间确定模块，用于根据所述关联关系，确定针对所述待存储数据的在线存储空间；以及

存储执行模块，用于将所述待存储数据存储至其所针对的在线存储空间，

其中，所述联机属性指业务在业务执行高峰时生成的或对性能要求高的数据时所具有的属性，所述批量属性指业务在夜间集中性地批量生成的批量数据时所具有的属性，所述移行变形属性指业务在终端设备迁移应用数据时生成的移行数据或对数据进行变形操作以使得数据脱密时生成变形数据时所具有的属性；所述待存储数据的所述业务属性信息分别为所述联机属性、所述批量属性或所述移行变形属性时，其与生成所述待存储数据的业务的关联关系逐渐减弱，针对所述待存储数据的在线存储空间的性能大小与所述关联关系的强弱正相关。

9.一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行根据权利要求1～7中任一项所述的方法。

10.一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行根据权利要求1～7中任一项所述的方法。