CN105930226A - 一种数据处理方法及装置 - Google Patents
一种数据处理方法及装置 Download PDFInfo
- Publication number
- CN105930226A CN105930226A CN201511026501.8A CN201511026501A CN105930226A CN 105930226 A CN105930226 A CN 105930226A CN 201511026501 A CN201511026501 A CN 201511026501A CN 105930226 A CN105930226 A CN 105930226A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- strategy
- type
- target strategy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1461—Backup scheduling policy
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据处理方法及装置。本发明实施例中,获取终端的执行策略,从执行策略中确定出当前待执行的目标策略;确定目标策略的执行模板,并将目标策略和目标策略的执行模板发送给终端,以使终端根据目标策略和目标策略的执行模板进行数据处理。本发明实施例中,执行策略为至少针对终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,从而实现了将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的;且,通过设计目标策略的执行模板,能够支持不同备份技术及有效性检测方法,具有高扩展和通用性。
Description
技术领域
本发明涉及网络数据服务技术领域,尤其涉及一种数据处理方法及装置。
背景技术
在信息互联网的时代,社会的高效有序运转越来越依赖信息系统,信息系统每故障一分钟带来的损失和影响都是巨大的,尤其是在金融、电信、电力等关系国计民生的领域。通过对信息系统和数据进行备份来提高信息系统的可用性,是最常见也是最基础的高可用保障方法。
目前,商用软件大多通过数据备份来提高信息系统的可用性。通常情况下,商用软件都只是提供数据备份功能,且只是将备份的数据进行数据介质的恢复,不能对数据的业务逻辑的可用性进行有效性检测。然而,在采用数据备份方案的情况下,由于备份数据的可用性是直接决定系统灾难恢复的成败,因此,如何确保数据完成备份且备份的数据是可用的,是高可用性保障方案的关键。现有商用软件只是提供数据备份功能,很难保证备份数据有效性。
综上,目前亟需一种有效的数据处理方法,以解决现有商用软件只是通过数据备份功能,很难保证备份数据有效性的技术问题。
发明内容
本发明实施例提供一种数据处理方法及装置,用以实现实现将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的。
本发明实施例提供的一种数据处理方法,包括:
获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;
确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
较佳地,所述从所述执行策略中确定出当前待执行的目标策略,包括:
根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。
较佳地,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,包括:
所述执行策略为针对所述终端拟备份数据的数据类型和业务类型确定的;
若所述终端拟备份数据的业务类型为第一业务类型且所述拟备份数据为第二数据类型时,则确定所述拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
较佳地,确定所述目标策略为数据有效性检测策略的情况下,将待有效性检测的备份数据恢复至有效性检测服务器,并根据预设校验算法对所述备份数据进行有效性检测;所述备份数据为备份的数据库类型数据、备份的文件类型数据或备份的操作系统类型数据。
较佳地,确定所述目标策略为数据有效性检测策略的情况下,根据所述待有效性检测的备份数据的备份时间以及存储时间确定所述待有效性检测的备份数据对应的数据有效性检测策略;所述备份数据为备份的归档数据或备份的磁带数据。
较佳地,确定所述目标策略为数据有效性检测策略的情况下,若对待有效性检测的备份数据完成有效性检测后,确定检测结果为失败,则执行所述数据备份策略;所述备份数据为备份的数据库快照数据。
本发明实施例提供一种数据处理装置,该装置包括:
获取模块,用于获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
确定模块,用于从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
发送模块,用于将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
较佳地,所述确定模块具体用于:
根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。
较佳地,所述执行策略为针对所述终端拟备份数据的数据类型和业务类型确定的;
所述确定模块还用于:
若所述终端拟备份数据的业务类型为第一业务类型且所述拟备份数据为第二数据类型时,则确定所述拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
较佳地,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,将待有效性检测的备份数据恢复至有效性检测服务器,并根据预设校验算法对所述备份数据进行有效性检测;所述备份数据为备份的数据库类型数据、备份的文件类型数据或备份的操作系统类型数据。
较佳地,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,根据所述待有效性检测的备份数据的备份时间以及存储时间确定所述待有效性检测的备份数据对应的数据有效性检测策略;所述备份数据为备份的归档数据或备份的磁带数据。
较佳地,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,若对待有效性检测的备份数据完成有效性检测后,确定检测结果为失败,则执行所述数据备份策略;所述备份数据为备份的数据库快照数据。
本发明的上述实施例中,获取终端的执行策略,从执行策略中确定出当前待执行的目标策略,其中,目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定目标策略的执行模板,目标策略的执行模板是根据执行策略对应的数据类型得到的,并将目标策略和目标策略的执行模板发送给终端,以使终端根据目标策略和目标策略的执行模板进行数据处理。本发明实施例中,执行策略为至少针对终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,从而实现了将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的;且,通过设计目标策略的执行模板,能够支持不同备份技术及有效性检测方法,具有高扩展和通用性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种数据处理方法对应的流程示意图;
图2为数据库类型、文件类型及操作系统类型的数据处理过程示意图;
图3为归档数据类型及物理磁带类型的数据处理过程示意图;
图4为数据库快照类型的数据处理过程示意图;
图5为本发明实施例提供的一种数据处理装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
本发明实施例中的数据处理方法适用多种场景,例如C/S架构的应用场景。以C/S架构为例,客户端部属有Agent客户端,server端根据配置的执行策略,统一调用客户端Agent完成数据处理过程(即数据的备份、恢复及有效性检测)。进一步地,服务器端还可以实时跟踪各客户端任务执行的进度及执行结果,并进行统一的监控及告警。
图1为本发明实施例提供的一种数据处理方法对应的流程示意图,该方法包括:
步骤101,获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
步骤102,从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;
步骤103,确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
步骤104,将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
本发明实施例中,执行策略为至少针对终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,从而实现了将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的;且,通过设计目标策略的执行模板,能够支持不同备份技术及有效性检测方法,具有高扩展和通用性。
具体地,由于应用系统的数据可以分为如下数据类型:数据库类型、文件类型、归档数据类型、数据库快照类型、操作系统类型、磁带数据类型。因此,针对不同的数据类型可以确定不同的执行策略:数据库执行策略、文件类型执行策略、归档数据执行策略、数据库快照执行策略、操作系统执行策略及磁带数据执行策略等。
进一步地,若根据数据的性质及类型对具有相同或者相似特征的应用系统数据进行分类,将数据性质及类型相似的数据归纳为同一业务类型,则可以将应用系统分为如下业务类型:核心联机交易业务、非核心联机交易业务、IT系统管理业务、批处理业务、外部管理平台业务、数据服务类业务、流水文件业务、海量大数据业务。
通过对数据的执行策略进行分析,很多业务类型具有相同的执行策略类型,因此,这些业务类型可适用于同一执行模板,进而可以对多个通用的执行模板进行管理和应用。如表1所示,不同业务类型对应的执行策略示意。
表1:不同业务类型对应的执行策略示意
本发明实施例中,终端的执行策略为针对终端拟备份数据的数据类型和业务类型确定的,若终端拟备份数据的业务类型为第一业务类型且拟备份数据为第二数据类型时,则确定拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
如表1所示,若拟备份数据的业务类型为核心联机交易业务且拟备份数据为数据库类型时,则确定拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。若拟备份数据的业务类型为核心联机交易业务且拟备份数据为数据库快照类型时,则无需确定拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
又例如,在拟备份数据的业务类型为非核心联机交易业务的情况下,拟备份数据为数据库类型、文件类型或操作系统类型时,则确定拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略;拟备份数据为归档数据类型、数据库快照类型或磁带类型时,则无需确定拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
本发明实施例针对数据所属的不同业务类型,配置的执行策略也存在差异,并且该差异是基于业务重要性等级差别化配置备份及检测需求而设计的,从而使得本发明实施例更能有效满足实际需求,具有更强实用价值。
本发明实施例中,针对数据备份策略,可提供数据备份的执行模板;针对数据恢复策略,可提供数据恢复的执行模板;针对数据有效性检测策略,可提供数据有效性检测的执行模板。进一步地,根据不同的数据类型,数据备份的执行模板包括:数据库备份模板、数据库日志备份模板、文件类型备份模板、归档数据备份模板、数据库快照备份模板、操作系统备份模板;数据恢复的执行模板包括:数据库恢复模板、数据库日志恢复模板、文件类型恢复模板、归档数据恢复模板、数据库快照恢复模板、操作系统恢复模板;数据有效性检测的执行模板包括:数据库有效性检测模板、数据库日志有效性检测模板、文件类型有效性检测模板、归档数据有效性检测模板、数据库快照有效性检测模板、操作系统有效性检测模板。
本发明实施例中通过提供上述各种数据类型的执行模板,能够满足对各种数据类型的数据进行处理,从而弥补了现有的商业软件仅支持部分常见的数据类型的处理的不足之处。
可选地,在步骤102中,根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。例如,在执行策略中设定数据备份策略的执行时间为3:00,数据恢复策略的执行时间为5:00,数据有效性检测策略的执行时间为7:00,则若判断当前时间为3:00,则将数据备份策略确定为当前待执行的目标策略,若当前时间为5:00,则将数据恢复策略确定为当前待执行的目标策略,若当前时间为7:00,则将数据有效性检测策略确定为当前待执行的目标策略。
在步骤103中,确定目标策略为数据备份策略的情况下,根据执行策略对应的数据类型(即拟备份数据的数据类型)从数据备份的各个执行模板中确定出与所述拟备份数据的数据类型对应的执行模板。
在步骤104中,将目标策略和目标策略的执行模板发送给终端,从而使得终端根据目标策略和目标策略的执行模板进行数据备份处理、数据恢复处理以及数据有效性检测。
下面针对不同数据类型的处理方法进行具体介绍、
(1)对于数据库类型、文件类型及操作系统类型的数据备份恢复及有效性检测的处理过程。如图2所示,为数据库类型、文件类型及操作系统类型的数据处理过程示意图。
如图2所示,首先配置数据检测策略,新增加一条数据检测的策略(录入策略主体、恢复作业计划信息、备份主机信息、任务信息),将数据直接写入数据库。之后调度程序将读取数据库,抓取检测策略对应的备份策略,获取所需检测策略的备份信息。
根据配置的数据备份恢复有效性检测策略,分阶段对数据进行备份、恢复、有效性检测,其中,数据备份、恢复以及有效性检测均根据配置的执行模板对不同类型的数据进行处理。
对于文件类型的数据,进行有效性检测处理时,将待检测的文件恢复至有效性检测服务器,根据配置的有效性校验算法进行校验,比如,对比检查文件的个数、大小、文件结束标志位,文件编码等,通过有效的校验法可以确保文件的正确性。
对于数据库类型的数据,进行有效性检测处理时,将有效性检测的备份数据库异机恢复至有效性检测服务器,将数据库在异机激活,验证数据库的可恢复性,同时验证数据库个对象的状态、记录数量、大小等,通过校验算法认为备份数据库数据是有效的。
对于操作系统类型的数据,进行有效性检测处理时,将待有效性检测的备份操作系统根据策略配置的调度窗口恢复至有效性检测服务器,将操作系统在异机引导拉起,然后根据操作系统有效性检测模板配置的校验算法进行有效性检测,可以确保备份操作系统文件是有效的。
进一步地,还可以对各个目标策略的执行情况进行监控并维护广义备份任务表中对应的记录,任务执行过程中,若有异常发现,则通过报错接口向指定的监控系统的告警平台发送告警消息,以便于进行手工修正,同时,还可以将异常发现通过报表的形式进行展现。当任务一旦完成,不管成功或失败,均可以通过管理平台对恢复检测任务进行展示及查询。
(2)对于归档数据类型及物理磁带类型的数据备份恢复及有效性检测的处理过程。如图3所示,为归档数据类型及物理磁带类型的数据处理过程示意图。
物理磁带备份数据的有效性检测主要是检测磁带的磁性衰减情况是否影响到数据的可恢复及可用性,本发明实施例为根据备份时间及存储时间为每盘备份磁带标记了有效性检测的策略,当磁带达到检测条件时将自动对磁带进行数据恢复性检测,当磁带读取失败时,将以事件告警方式通知用户重写该磁带以保证数据安全。用户接到通知后,以手动的方式完成数据重写工作。用户根据处理情况设置处理结果。否则平台会一直进行事件告警,直到系统中相关数据不满足发送消息条件为止。
如图3所示,通过数据抽样的方式对归档数据类型及物理磁带类型的数据的有效性进行检测,任务执行过程中,若有异常发现,则通过报错接口向指定的监控系统的告警平台发送告警消息,以便于进行手工修正。也可以将通过报表的形式进行展现检测结果。
(3)对于数据库快照类型的数据备份恢复及有效性检测的处理过程。如图4所示,为数据库快照类型的数据处理过程示意图。
如图4所示,首先进行策略配置,数据库快照是基于海量数据库的快速备份及恢复需要而采用的一种数据备份及恢复方案。快照备份有效性检测任务为客户端程序在后台按照配置的策略时间窗口要求在有效性检测服务器自动挂载存储快照卷并在异机挂载快照并激活数据库,验证数据库的可恢复性,同时验证数据库个对象的状态、记录数量、大小等,通过校验算法认为备份数据库数据是有效的。任务执行过程中,若有异常发现,则通过报错接口向指定的监控系统的告警平台发送告警消息,并重拍快照,同时,还可以将异常发现通过报表的形式进行展现。
本发明的上述实施例中,获取终端的执行策略,从执行策略中确定出当前待执行的目标策略,其中,目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定目标策略的执行模板,目标策略的执行模板是根据执行策略对应的数据类型得到的,并将目标策略和目标策略的执行模板发送给终端,以使终端根据目标策略和目标策略的执行模板进行数据处理。本发明实施例中,执行策略为至少针对终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,从而实现了将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的;且,通过设计目标策略的执行模板,能够支持不同备份技术及有效性检测方法,具有高扩展和通用性。
本发明实施例基于“备份即可用”的思想,通过设计备份、恢复、有效性检测一体化架构,根据数据类型定制执行模板,统一控制调度实现数据的自动备份、恢复及有效性检测,从而可以从业务可用性保障上真正实现数据的高可用性,极大提高系统的高可用性和数据的安全性。同时,实现一体化集中管理配置、备份、恢复、有效性检测自动化、方便、快捷和易管理,大大减轻了数据中心数据可用性管理的工作量。上述设计思路与平台和硬件设备关联性不大、通用性较强,弥补了市面上各商用备份软件的不足,有较高的投入收益率。
针对上述方法流程,本发明实施例还提供一种数据处理装置,该装置的具体内容可以参照上述方法实施。
图5为本发明实施例提供的一种数据处理装置的结构示意图,该装置包括:
获取模块501,用于获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
确定模块502,用于从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
发送模块503,用于将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
较佳地,所述确定模块502具体用于:
根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。
较佳地,所述执行策略为针对所述终端拟备份数据的数据类型和业务类型确定的;
所述确定模块502还用于:
若所述终端拟备份数据的业务类型为第一业务类型且所述拟备份数据为第二数据类型时,则确定所述拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
较佳地,所述确定模块502还用于:
确定所述目标策略为数据有效性检测策略的情况下,将待有效性检测的备份数据恢复至有效性检测服务器,并根据预设校验算法对所述备份数据进行有效性检测;所述备份数据为备份的数据库类型数据、备份的文件类型数据或备份的操作系统类型数据。
较佳地,所述确定模块502还用于:
确定所述目标策略为数据有效性检测策略的情况下,根据所述待有效性检测的备份数据的备份时间以及存储时间确定所述待有效性检测的备份数据对应的数据有效性检测策略;所述备份数据为备份的归档数据或备份的磁带数据。
较佳地,所述确定模块502还用于:
确定所述目标策略为数据有效性检测策略的情况下,若对待有效性检测的备份数据完成有效性检测后,确定检测结果为失败,则执行所述数据备份策略;所述备份数据为备份的数据库快照数据。
从上述内容可以看出:本发明的上述实施例中,获取终端的执行策略,从执行策略中确定出当前待执行的目标策略,其中,目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定目标策略的执行模板,目标策略的执行模板是根据执行策略对应的数据类型得到的,并将目标策略和目标策略的执行模板发送给终端,以使终端根据目标策略和目标策略的执行模板进行数据处理。本发明实施例中,执行策略为至少针对终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,从而实现了将数据备份及备份数据有效性检测进行一体化设计,确保数据备份成功且备份数据是有效可用的;且,通过设计目标策略的执行模板,能够支持不同备份技术及有效性检测方法,具有高扩展和通用性。
本领域内的技术人员应明白,本发明的实施例可提供为方法、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (12)
1.一种数据处理方法,其特征在于,该方法包括:
获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;
确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
2.如权利要求1所述的方法,其特征在于,所述从所述执行策略中确定出当前待执行的目标策略,包括:
根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。
3.如权利要求1所述的方法,其特征在于,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略,包括:
所述执行策略为针对所述终端拟备份数据的数据类型和业务类型确定的;
若所述终端拟备份数据的业务类型为第一业务类型且所述拟备份数据为第二数据类型时,则确定所述拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
4.如权利要求1所述的方法,其特征在于,确定所述目标策略为数据有效性检测策略的情况下,将待有效性检测的备份数据恢复至有效性检测服务器,并根据预设校验算法对所述备份数据进行有效性检测;所述备份数据为备份的数据库类型数据、备份的文件类型数据或备份的操作系统类型数据。
5.如权利要求1所述的方法,其特征在于,确定所述目标策略为数据有效性检测策略的情况下,根据所述待有效性检测的备份数据的备份时间以及存储时间确定所述待有效性检测的备份数据对应的数据有效性检测策略;所述备份数据为备份的归档数据或备份的磁带数据。
6.如权利要求1所述的方法,其特征在于,确定所述目标策略为数据有效性检测策略的情况下,若对待有效性检测的备份数据完成有效性检测后,确定检测结果为失败,则执行所述数据备份策略;所述备份数据为备份的数据库快照数据。
7.一种数据处理装置,其特征在于,该装置包括:
获取模块,用于获取终端的执行策略,所述执行策略为至少针对所述终端拟备份数据的数据类型确定的数据备份策略、数据恢复策略和数据有效性检测策略;
确定模块,用于从所述执行策略中确定出当前待执行的目标策略,所述目标策略为数据备份策略、数据恢复策略和数据有效性检测策略中的一个;确定所述目标策略的执行模板;所述目标策略的执行模板是根据所述执行策略对应的数据类型得到的;
发送模块,用于将所述目标策略和所述目标策略的执行模板发送给所述终端,以使所述终端根据所述目标策略和所述目标策略的执行模板进行数据处理。
8.如权利要求7所述的装置,其特征在于,所述确定模块具体用于:
根据所述执行策略中设定的数据备份策略、数据恢复策略以及数据有效性检测策略的执行时间,将执行时间与当前时间对应的目标策略确定为当前待执行的目标策略。
9.如权利要求7所述的装置,其特征在于,所述执行策略为针对所述终端拟备份数据的数据类型和业务类型确定的;
所述确定模块还用于:
若所述终端拟备份数据的业务类型为第一业务类型且所述拟备份数据为第二数据类型时,则确定所述拟备份数据的数据备份策略、数据恢复策略和数据有效性检测策略。
10.如权利要求7所述的装置,其特征在于,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,将待有效性检测的备份数据恢复至有效性检测服务器,并根据预设校验算法对所述备份数据进行有效性检测;所述备份数据为备份的数据库类型数据、备份的文件类型数据或备份的操作系统类型数据。
11.如权利要求7所述的装置,其特征在于,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,根据所述待有效性检测的备份数据的备份时间以及存储时间确定所述待有效性检测的备份数据对应的数据有效性检测策略;所述备份数据为备份的归档数据或备份的磁带数据。
12.如权利要求7所述的装置,其特征在于,所述确定模块还用于:
确定所述目标策略为数据有效性检测策略的情况下,若对待有效性检测的备份数据完成有效性检测后,确定检测结果为失败,则执行所述数据备份策略;所述备份数据为备份的数据库快照数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511026501.8A CN105930226B (zh) | 2015-12-30 | 2015-12-30 | 一种数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511026501.8A CN105930226B (zh) | 2015-12-30 | 2015-12-30 | 一种数据处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105930226A true CN105930226A (zh) | 2016-09-07 |
CN105930226B CN105930226B (zh) | 2019-01-01 |
Family
ID=56840003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201511026501.8A Active CN105930226B (zh) | 2015-12-30 | 2015-12-30 | 一种数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105930226B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108021469A (zh) * | 2016-10-31 | 2018-05-11 | 中国电信股份有限公司 | 数据修复方法和装置 |
CN109614269A (zh) * | 2018-12-15 | 2019-04-12 | 无锡北方数据计算股份有限公司 | 一种结合快照技术的持续数据保护系统及方法 |
CN109800259A (zh) * | 2018-12-11 | 2019-05-24 | 深圳市金证科技股份有限公司 | 数据采集方法、装置及终端设备 |
CN111241082A (zh) * | 2020-01-13 | 2020-06-05 | 贝壳技术有限公司 | 数据修正方法及装置 |
CN112036421A (zh) * | 2019-05-16 | 2020-12-04 | 搜狗(杭州)智能科技有限公司 | 一种图像处理方法、装置和电子设备 |
CN112749041A (zh) * | 2019-10-29 | 2021-05-04 | 中国移动通信集团浙江有限公司 | 虚拟化网络功能备份策略自决策方法、装置及计算设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1549128A (zh) * | 2003-05-15 | 2004-11-24 | 深圳市中兴通讯股份有限公司南京分公 | 一种数据库备份方法 |
CN102541694A (zh) * | 2012-01-18 | 2012-07-04 | 浪潮(北京)电子信息产业有限公司 | 一种数据库备份的方法及装置 |
CN102629224A (zh) * | 2012-04-26 | 2012-08-08 | 广东电子工业研究院有限公司 | 一种基于云平台的一体化数据容灾方法及其装置 |
GB2505185A (en) * | 2012-08-21 | 2014-02-26 | Ibm | Creating a backup image of a first memory space in a second memory space. |
-
2015
- 2015-12-30 CN CN201511026501.8A patent/CN105930226B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1549128A (zh) * | 2003-05-15 | 2004-11-24 | 深圳市中兴通讯股份有限公司南京分公 | 一种数据库备份方法 |
CN102541694A (zh) * | 2012-01-18 | 2012-07-04 | 浪潮(北京)电子信息产业有限公司 | 一种数据库备份的方法及装置 |
CN102629224A (zh) * | 2012-04-26 | 2012-08-08 | 广东电子工业研究院有限公司 | 一种基于云平台的一体化数据容灾方法及其装置 |
GB2505185A (en) * | 2012-08-21 | 2014-02-26 | Ibm | Creating a backup image of a first memory space in a second memory space. |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108021469A (zh) * | 2016-10-31 | 2018-05-11 | 中国电信股份有限公司 | 数据修复方法和装置 |
CN108021469B (zh) * | 2016-10-31 | 2020-10-27 | 中国电信股份有限公司 | 数据修复方法和装置 |
CN109800259A (zh) * | 2018-12-11 | 2019-05-24 | 深圳市金证科技股份有限公司 | 数据采集方法、装置及终端设备 |
CN109614269A (zh) * | 2018-12-15 | 2019-04-12 | 无锡北方数据计算股份有限公司 | 一种结合快照技术的持续数据保护系统及方法 |
CN112036421A (zh) * | 2019-05-16 | 2020-12-04 | 搜狗(杭州)智能科技有限公司 | 一种图像处理方法、装置和电子设备 |
CN112749041A (zh) * | 2019-10-29 | 2021-05-04 | 中国移动通信集团浙江有限公司 | 虚拟化网络功能备份策略自决策方法、装置及计算设备 |
CN112749041B (zh) * | 2019-10-29 | 2023-12-26 | 中国移动通信集团浙江有限公司 | 虚拟化网络功能备份策略自决策方法、装置及计算设备 |
CN111241082A (zh) * | 2020-01-13 | 2020-06-05 | 贝壳技术有限公司 | 数据修正方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN105930226B (zh) | 2019-01-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105930226A (zh) | 一种数据处理方法及装置 | |
CN106603264A (zh) | 一种定位故障根源的方法和设备 | |
US8489729B2 (en) | System and method for social service event processing and management | |
US20110307957A1 (en) | Method and System for Managing and Monitoring Continuous Improvement in Detection of Compliance Violations | |
CN107665234A (zh) | 业务处理方法、装置、服务器和存储介质 | |
US8938648B2 (en) | Multi-entity test case execution workflow | |
US7624309B2 (en) | Automated client recovery and service ticketing | |
CN104182683B (zh) | 一种联机事务的监控方法、装置及系统 | |
CN110188103A (zh) | 数据对账方法、装置、设备和存储介质 | |
US20210073098A1 (en) | Information processing system | |
WO2019061999A1 (zh) | 断点外呼方法、电子装置及计算机可读存储介质 | |
CN110063042A (zh) | 一种数据库故障的响应方法及其终端 | |
US9082085B2 (en) | Computing environment climate dependent policy management | |
CN103440460A (zh) | 一种应用系统变更验证方法及验证系统 | |
WO2020253045A1 (zh) | 配置化的数据转发异常补处理方法、装置及可读存储介质 | |
US8972422B2 (en) | Management of log data in a networked system | |
CN112333116B (zh) | 一种oa系统集成的混合云运维协作平台及方法 | |
CN106445787A (zh) | 一种监控服务器核心转储文件的方法、装置及电子设备 | |
CN105897498A (zh) | 一种监控业务的方法及设备 | |
CN107612755A (zh) | 一种云资源的管理方法及其装置 | |
CN112506802A (zh) | 测试数据的管理方法及系统 | |
CN116302989A (zh) | 压力测试方法及系统、存储介质、计算机设备 | |
US10805275B1 (en) | Multi-process architecture for implementing a secure internet service | |
CN111915275A (zh) | 一种应用操作的流程管理方法、装置及系统 | |
CN113420713A (zh) | 异常监控方法、装置、电子设备及计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |