CN105808633A - 数据归档方法和系统 - Google Patents

Abstract

本发明涉及一种数据归档方法，所述方法包括：执行归档脚本，所述归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，所述数据对象之间的依赖关系用来确定树形数据结构；根据所述数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足所述数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。采用该方法，能由于将满足数据类型和时间条件的数据对象进行了迁移，节省了业务系统平台的存储空间，且业务系统平台访问时不会访问到归档服务器中的历史数据中去，因此提高了程序运行效率。

Description

数据归档方法和系统

技术领域

本发明涉及计算机技术领域，特别是涉及一种历史数据归档方法和系统。

背景技术

现有很多业务系统平台中都存在大量数据，但是一个数据往往具有生命周期。所谓生命周期是指数据从创建到不被访问的周期时间，因为数据通常在刚创建时其被访问的概率较高，但随着时间的推移，该数据被访问的概率将会越来越小，甚至最后被访问的次数为零。例如，电子商务平台中的购物订单，通常一个购物订单被创建时被访问的概率比较高，用户常见购物订单后会确定订单认真会在近期访问很多次该购物订单。在一定时间内该购物订单也有被访问的可能性，比如用户通常会对近一年的购物订单进行查询。然而，随着时间的推移，该购物订单被访问的概率将会越来越少，例如，用户通常不会对5年设置3年前的购物订单进行查询。又例如，保单在理赔期限其被访问的概率会比较高，但过了理赔期限则保单数据被访问的概念将会很小。

通常，一个业务系统平台中的数据一般都是只增不删的，随着时间的推移，被访问的概率比较小甚至不会被访问的数据将会越来越多，这些历史数据必然会占用大量的数据存储空间。同时，由于系统程序运行期间，可能在访问其它数据时会顺带访问这些历史数据，从而还会影响程序效率。

发明内容

基于此，有必要针对上述技术问题，提供一种能节省数据存储空间并能提高程序运行效率的数据归档方法和系统。

一种数据归档方法，所述方法包括：

执行归档脚本，所述归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，所述数据对象之间的依赖关系用来确定树形数据结构；

根据所述数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足所述数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

在其中一个实施例中，所述数据对象之间的依赖关系通过主外键进行描述，所述数据对象的主键用于描述数据节点本身，所述数据对象的外键用来描述所述数据节点的上一层数据节点，其中，根节点的外键为空。

在其中一个实施例中，所述方法还包括：

显示归档数据查询界面，所述归档数据查询界面提供了归档数据查询入口；

获取用户输入的作为根节点的数据对象的数据标识；

根据所述数据标识以及归档存储的数据对象之间的依赖关系，查询以所述数据标识为根节点的数据并展示。

在其中一个实施例中，所述方法还包括：

通过应用界面上设置的按钮触发反归档操作，获取所述反归档操作对应的作为根节点的数据对象的数据标识；

根据所述数据标识确定树形数据结构，并从所述数据标识对应的根节点出发，逐层将树形数据结构中的数据节点对应的数据对象进行反归档，直到所有叶子节点反归档完成。

在其中一个实施例中，所述方法还包括：

显示数据查询界面，所述数据查询界面提供了数据查询入口；

通过所述数据查询入口获取用户输入的查询关键字；

根据所述查询关键字在系统平台中进行查询，如果查询不到，则进一步在所述归档服务器中查询归档数据，如果查询不到，则提示数据不存在。

一种数据归档系统，所述系统包括：

脚本执行模块，用于执行归档脚本，所述归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，所述数据对象之间的依赖关系用来确定树形数据结构；

数据迁移模块，用于根据所述数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足所述数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

在其中一个实施例中，所述数据对象之间的依赖关系通过主外键进行描述，所述数据对象的主键用于描述数据节点本身，所述数据对象的外键用来描述所述数据节点的上一层数据节点，其中，根节点的外键为空。

在其中一个实施例中，所述系统还包括：

归档数据查询模块，用于显示归档数据查询界面，所述归档数据查询界面提供了归档数据查询入口；获取用户输入的作为根节点的数据对象的数据标识；根据所述数据标识以及归档存储的数据对象之间的依赖关系，查询以所述数据标识为根节点的数据并展示。

在其中一个实施例中，所述系统还包括：

反归档模块，用于通过应用界面上设置的按钮触发反归档操作，获取所述反归档操作对应的作为根节点的数据对象的数据标识；根据所述数据标识确定树形数据结构，并从所述数据标识对应的根节点出发，逐层将树形数据结构中的数据节点对应的数据对象进行反归档，直到所有叶子节点反归档完成。

在其中一个实施例中，所述系统还包括：

一般数据查询模块，用于显示数据查询界面，所述数据查询界面提供了数据查询入口；通过所述数据查询入口获取用户输入的查询关键字；根据所述查询关键字在系统平台中进行查询，如果查询不到，则进一步在所述归档服务器中查询归档数据，如果查询不到，则提示数据不存在。

上述数据归档方法和系统，通过执行归档脚本，该归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，其中数据对象之间的依赖关系可用来确定树形数据结构，根据数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。由于将满足数据类型和时间条件的数据对象进行了迁移，节省了业务系统平台的存储空间，且业务系统平台访问时不会访问到归档服务器中的历史数据中去，因此提高了程序运行效率。

附图说明

图1为一个实施例中数据归档方法的应用环境图；

图2为一个实施例中数据归档方法的流程图；

图3为一个实施例中查询归档数据的流程图；

图4为一个实施例中归档数据查询界面的示意图；

图5为一个实施例中归档数据查询结果的界面示意图之一；

图6为一个实施例中归档数据查询结果的界面示意图之二；

图7为一个实施例中反归档的流程示意图；

图8为一个实施例中数据归档系统的结构框图；

图9为另一个实施例中数据归档系统的结构框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例提供的数据归档方法可应用于如图1所示的系统中，参考图1所示，业务系统平台102包含业务终端112和相应的业务服务器122，业务终端112与业务服务器122通过网络连接，业务终端112上运行平台并响应用户请求，根据用户请求向业务服务器122发送数据请求，业务服务器122中存储了与业务有关的数据。进一步的，业务服务器122执行归档脚本，将满足归档条件的数据对象迁移到归档服务器104中。可以理解的是，由于业务服务器122需要相应数据请求，因此通常可为高端服务器，而归档服务器104用于保存归档的历史数据，可使用低端服务器。也就是说，归档服务器104可采用比业务服务器122硬件配置更低的服务器。

如图2所示，在一个实施例中，提供了一种数据归档方法，该方法包括：

步骤202，执行归档脚本，该归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，该数据对象之间的依赖关系用来确定树形数据结构。

本实施例中，预先设置归档脚本，在归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件。具体的，在业务系统平台中的数据对象之间的依赖关系构成树形数据结构。业务系统平台在运行过程中可执行归档脚本。

步骤204，根据数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

本实施例中，由于归档脚本中定义了归档的数据类型和相应的时间条件，执行归档脚本，根据数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层扫描树形数据结构中的每个数据对象，如果数据对象的数据类型和时间条件满足脚本中定义的数据类型和时间条件，则将该数据对象拷贝到归档服务器中，并相应的删除业务服务器中的该数据对象。这样逐层迁移，直到迁移完作为根节点的数据对象。

进一步的，不同的数据类型可以设置不同的时间条件。例如，对于购物订单，可以设置相应的时间条件为订单创建时间为1年或者3年以上，即订单创建后超过1年或者3年的应进行归档。又如，对于保单，可设置相应的时间条件为3年或5年，即保单创建后超过3年或5年的应进行归档。因此，在归档脚本中可以定义大量需要归档的数据类型和时间条件。

本实施例中，通过执行归档脚本，该归档脚本中定义了归档的数据类型、数据对象之间依赖关系和时间条件，其中数据对象之间的依赖关系可用来确定树形数据结构，根据数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。由于将满足数据类型和时间条件的数据对象进行了迁移，节省了业务系统平台的存储空间，且业务系统平台访问时不会访问到归档服务器中的历史数据中去，因此提高了程序运行效率。

进一步的，在一个实施例中，数据对象之间的依赖关系通过主外键进行描述，其中，数据对象的主键用于描述数据节点本身，数据对象的外键用来描述数据节点的上一层数据节点，其中，根节点的外键为空。

本实施例中，使用主外键来描述一个数据对象(数据节点)。数据节点通过(主键，外键)的形式来描述，其中，主键用来描述数据节点本身，而外键用来描述数据节点的上一层数据节点。具体的，数据节点对应的主键可为该数据节点对应的数据对象的数据标识，外键是该数据节点的上一层数据节点对应的数据对象的数据标识。通过(主键，外键)的形式可以将数据对象之间的依赖关系确定，得到树形数据结构。可以理解，根节点由于没有上一层数据节点，其主键为根节点的数据对象的数据标识，外键为空。

在一个实施例中，如图3所示，提供的数据归档方法还包括：

步骤302，显示归档数据查询界面，该归档数据查询界面提供了归档数据查询入口。

本实施例中，业务系统平台中还可提供归档数据查询界面，在该归档数据查询界面根据所提供业务的不同还可提供不同的查询入口，比如提供输入根节点的数据对象的输入入口等，还可通过归档数据查询界面提供查询结果的限制条件，比如时间条件、类型条件等。

步骤304，获取用户输入的作为根节点的数据对象的数据标识。

步骤306，根据获取的数据标识以及归档存储的数据对象之间的依赖关系，查询以该数据标识为根节点的数据并展示。

本实施例中，归档数据查询入口包括用来输入根节点的数据对象的数据标识的入口。由于每个数据节点都是通过(主键、外键)的形式进行描述，因此，根据根节点的数据标识可以从归档服务器中逐个找到树形数据结构中的每个数据对象，从而查找到该根节点下的所有数据对象。在具体的业务系统平台中，根节点对应的数据标识可为业务唯一号。

以保险业务平台为例，如图4所示，归档数据查询界面提供了可以输入保单单号的查询入口。在保险业务平台中，树形数据结构中的根节点的数据标识即为保单单号。结合图4所示，在归档数据查询界面中还可提供查询结果的限制条件，比如可以设置投保人类型、保险生效日期和承保日期等。用户输入保单单号，则可在操作界面中显示查询结果，如图5所示。进一步的，点击查询结果，则显示查询到的该保单下的所有数据对象，如图6所示。

在一个实施例中，如图7所示，提供的数据归档方法还包括：

步骤702，通过应用界面上设置的按钮触发反归档操作，获取反归档操作对应的作为根节点的数据对象的数据标识。

步骤704，根据获取到的数据标识确定树形数据结构，并从数据标识对应的根节点触发，逐层将树形数据结构中的数据节点对应的数据的对象进行反归档，直到所有叶子节点反归档完成。

本实施例中，反归档操作是指在归档服务器中的历史数据又迁移回业务服务器中。有一些历史数据，虽然进行了归档操作，但是可能在一定时间后业务系统平台又需要将其调出使用，因此需要实现反归档操作。

具体的，可在应用界面上提供按钮触发反归档操作，比如，在如图6所示的保单数据内容的显示界面提供按钮触发反归档操作。当接收到用户的反归档操作，获取反归档操作对应的根节点的数据标识。如保险业务平台中，获取要进行反归档的保单单号。根据根节点的数据标识以及树形数据结构，即可逐层的找到树形数据结构中的每个数据对象，在进行反归档时，可以拷贝每个数据对象到业务服务器中，直接迁移回所有的叶子节点，反归档完成。

本实施例中，由于可以实现一键反归档操作，提高了用户操作的便利性。且由于根据根节点的数据标识即可实现整个树形数据结构的整体数据对象的反归档，提高了反归档的数据迁移效率。此外，由于反归档是整个树形数据结构进行反归档，保留了原有的树形数据结构，使得原有的系统程序可以直接在反归档的数据上运行，节省了重新开发单独运行历史归档数据的系统程序所带来的时间成本和人力成本。

在一个实施例中，数据归档方法还包括：显示数据查询界面，该数据查询界面提供了数据查询入口；通过数据查询入口获取用户输入的查询关键字；根据查询关键字在系统平台中进行查询，如果查询不到，则进一步在归档服务器中查询归档数据，如果查询不到，则提示数据不存在。

本实施例中，在业务系统平台中，通常很多数据可以提供了关键字查询，在接收到用户输入的关键字查询时，可在系统平台也就是业务服务器中进行查询，如果查询不到，可进一步在归档服务器中查询是否已经归档，如果查询不到，则再提示数据不存在。

本实施例中，由于数据可能已迁移到的归档服务器中，当在业务服务器中查询不到相应数据时，可以进一步在归档服务器中进行查询，由于查询归档的历史数据的频率相对来说比较小，因此不会影响系统程序运行效率。

如图8所示，在一个实施例中，提供了一种数据归档系统，该系统包括脚本执行模块802和数据迁移模块804，其中：

脚本执行模块802，用于执行归档脚本，该归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，该数据对象之间的依赖关系用来确定树形数据结构。

数据迁移模块804，用于根据数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

在一个实施例中，数据对象之间的依赖关系通过主外键进行描述，数据对象的主键用于描述数据节点本身，数据对象的外键用来描述数据节点的上一层数据节点，其中，根节点的外键为空。

在一个实施例中，如图9所示，该数据归档系统还包括：

归档数据查询模块806，用于显示归档数据查询界面，该归档数据查询界面提供了归档数据查询入口；获取用户输入的作为根节点的数据对象的数据标识；根据数据标识以及归档存储的数据对象之间的依赖关系，查询以该数据标识为根节点的数据并展示。

反归档模块808，用于通过应用界面上设置的按钮触发反归档操作，获取反归档操作对应的作为根节点的数据对象的数据标识；根据数据标识确定树形数据结构，并从所述数据标识对应的根节点出发，逐层将树形数据结构中的数据节点对应的数据对象进行反归档，直到所有叶子节点反归档完成。

一般数据查询模块810，用于显示数据查询界面，数据查询界面提供了数据查询入口；通过数据查询入口获取用户输入的查询关键字；根据查询关键字在系统平台中进行查询，如果查询不到，则进一步在归档服务器中查询归档数据，如果查询不到，则提示数据不存在。

应当说明的是，在其它实施例中，数据归档系统除了包含脚本执行模块802和数据迁移模块804外，还可包括归档数据查询模块806、反归档模块808和一般数据查询模块810中的任意一个或者两个。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据归档方法，其特征在于，所述方法包括：

执行归档脚本，所述归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，所述数据对象之间的依赖关系用来确定树形数据结构；

根据所述数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足所述数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

2.根据权利要求1所述的方法，其特征在于，所述数据对象之间的依赖关系通过主外键进行描述，所述数据对象的主键用于描述数据节点本身，所述数据对象的外键用来描述所述数据节点的上一层数据节点，其中，根节点的外键为空。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

显示归档数据查询界面，所述归档数据查询界面提供了归档数据查询入口；

获取用户输入的作为根节点的数据对象的数据标识；

根据所述数据标识以及归档存储的数据对象之间的依赖关系，查询以所述数据标识为根节点的数据并展示。

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

通过应用界面上设置的按钮触发反归档操作，获取所述反归档操作对应的作为根节点的数据对象的数据标识；

根据所述数据标识确定树形数据结构，并从所述数据标识对应的根节点出发，逐层将树形数据结构中的数据节点对应的数据对象进行反归档，直到所有叶子节点反归档完成。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

显示数据查询界面，所述数据查询界面提供了数据查询入口；

通过所述数据查询入口获取用户输入的查询关键字；

根据所述查询关键字在系统平台中进行查询，如果查询不到，则进一步在所述归档服务器中查询归档数据，如果查询不到，则提示数据不存在。

6.一种数据归档系统，其特征在于，所述系统包括：

脚本执行模块，用于执行归档脚本，所述归档脚本中定义了归档的数据类型、数据对象之间的依赖关系和时间条件，所述数据对象之间的依赖关系用来确定树形数据结构；

数据迁移模块，用于根据所述数据对象之间的依赖关系，从作为叶子节点的数据对象开始，逐层将满足所述数据类型和时间条件的数据对象迁移到归档服务器，直到迁移完作为根节点的数据对象。

7.根据权利要求6所述的系统，其特征在于，所述数据对象之间的依赖关系通过主外键进行描述，所述数据对象的主键用于描述数据节点本身，所述数据对象的外键用来描述所述数据节点的上一层数据节点，其中，根节点的外键为空。

8.根据权利要求7所述的系统，其特征在于，所述系统还包括：

归档数据查询模块，用于显示归档数据查询界面，所述归档数据查询界面提供了归档数据查询入口；获取用户输入的作为根节点的数据对象的数据标识；根据所述数据标识以及归档存储的数据对象之间的依赖关系，查询以所述数据标识为根节点的数据并展示。

9.根据权利要求7所述的系统，其特征在于，所述系统还包括：

反归档模块，用于通过应用界面上设置的按钮触发反归档操作，获取所述反归档操作对应的作为根节点的数据对象的数据标识；根据所述数据标识确定树形数据结构，并从所述数据标识对应的根节点出发，逐层将树形数据结构中的数据节点对应的数据对象进行反归档，直到所有叶子节点反归档完成。

10.根据权利要求6所述的系统，其特征在于，所述系统还包括：

一般数据查询模块，用于显示数据查询界面，所述数据查询界面提供了数据查询入口；通过所述数据查询入口获取用户输入的查询关键字；根据所述查询关键字在系统平台中进行查询，如果查询不到，则进一步在所述归档服务器中查询归档数据，如果查询不到，则提示数据不存在。