CN110597669A - 银行历史数据参数化备份恢复方法和装置 - Google Patents

银行历史数据参数化备份恢复方法和装置 Download PDF

Info

Publication number
CN110597669A
CN110597669A CN201910890697.7A CN201910890697A CN110597669A CN 110597669 A CN110597669 A CN 110597669A CN 201910890697 A CN201910890697 A CN 201910890697A CN 110597669 A CN110597669 A CN 110597669A
Authority
CN
China
Prior art keywords
data
backup
hard disk
target data
host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910890697.7A
Other languages
English (en)
Other versions
CN110597669B (zh
Inventor
李金泽
张新磊
彭丰华
刘芳
黄鸿滨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bank of China Ltd
Original Assignee
Bank of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bank of China Ltd filed Critical Bank of China Ltd
Priority to CN201910890697.7A priority Critical patent/CN110597669B/zh
Publication of CN110597669A publication Critical patent/CN110597669A/zh
Application granted granted Critical
Publication of CN110597669B publication Critical patent/CN110597669B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1469Backup restoration techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02Banking, e.g. interest calculation or account maintenance

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Technology Law (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种银行历史数据参数化备份恢复方法和装置,该方法包括:根据P1环境删除的失效数据,确定失效数据的主键;根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;将主键和删除时刻追加至索引文件;将备份文件从主机硬盘备份至带库,参数化设置备份文件在主机硬盘的保留时长;在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境。本发明,通过建立删除数据索引文件,快速精确的定位目标数据所在备份文件,极大减少了当前需求分析和定位时间且定位准确;由于近期备份文件保存在主机硬盘,因此能快速反应,恢复至生产环境。

Description

银行历史数据参数化备份恢复方法和装置
技术领域
本发明涉及数据恢复技术领域,尤其涉及一种银行历史数据参数化备份恢复方法和装置。
背景技术
核心银行系统为提升效率,提高响应时间,需要及时删除暂时无效的数据,但当特殊业务场景需要查询或恢复这些数据时,需要花费大量时间分析、定位、筛选和恢复所需数据。
目前查询和恢复已删除数据方式的步骤包括:
①根据需求分析删除数据可能存在的时间点。根据分析结果从带库中将以上时间点数据恢复到P2环境。
②在P2端查询所需数据。如未命中,需重复1、2步骤进一步分析,逐渐缩小范围。
③从恢复文件或数据表中人工挑选出目标数据,通过开发一次性版本,将目标文件传输并恢复至P1环境。
上述恢复数据的方式存在以下缺点:
①被删除数据定位困难,需求获取存在人为不确定性,导致分析定位花费大量时间。
②由于带库存储本身的局限,恢复效率较低,不能很好满足时效性要求。
③人工从恢复文件或数据表中挑选目标数据效率极低,且每次都开发一次性版本投产,增加投入成本,同时提高生产风险。
发明内容
本发明实施例提供一种银行历史数据参数化备份恢复方法,通过建立删除数据索引文件,快速定位目标数据所在备份文件,实现了目标数据的快速定位,该方法包括:
根据P1环境删除的失效数据,确定失效数据的主键;
根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;
将主键和删除时刻追加至索引文件;
将备份文件从主机硬盘备份至带库,参数化设置备份文件在主机硬盘的保留时长;
在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境。
本发明实施例还提供一种银行历史数据参数化备份恢复装置,包括:备份模块,恢复模块,参数化模块;
备份模块,用于根据P1环境删除的失效数据,确定失效数据的主键;根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;将主键和删除时刻追加至索引文件;将备份文件从主机硬盘备份至带库;
恢复模块,用于在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境;
参数化模块,用于参数化设置备份文件在主机硬盘的保留时长。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述银行历史数据参数化备份恢复方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行实现上述银行历史数据参数化备份恢复方法的计算机程序。
本发明实施例提供了一种银行历史数据参数化备份恢复方法和装置,通过建立删除数据索引文件,快速精确的定位目标数据所在备份文件,极大减少了当前需求分析和定位时间且定位准确;由于近期备份文件保存在主机硬盘,且往往需要恢复数据的情况出现在删除后一周以内,因此能快速反应,恢复至生产环境,大大降低了从带库恢复和挑选的数据准备时间;整个流程通过参数化控制,健壮性强,降低人工干预的风险和一次性版本开发的成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本发明实施例一种银行历史数据参数化备份恢复方法示意图。
图2为本发明实施例一种银行历史数据参数化备份恢复装置示意图。
图3为本发明实施例一种银行历史数据参数化备份恢复装置的备份模块示意图。
图4为本发明实施例一种银行历史数据参数化备份恢复装置的恢复模块示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。
如图1本发明实施例一种银行历史数据参数化备份恢复方法示意图所示,本发明实施例提供一种银行历史数据参数化备份恢复方法,通过建立删除数据索引文件,快速定位目标数据所在备份文件,实现了目标数据的快速定位,该方法包括:
步骤101:根据P1环境删除的失效数据,确定失效数据的主键;
步骤102:根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;
步骤103:将主键和删除时刻追加至索引文件;
步骤104:将备份文件从主机硬盘备份至带库,参数化设置备份文件在主机硬盘的保留时长;
步骤105:在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境。
本发明实施例提供的一种银行历史数据参数化备份恢复方法,通过建立删除数据索引文件,快速精确的定位目标数据所在备份文件,极大减少了当前需求分析和定位时间且定位准确;由于近期备份文件保存在主机硬盘,且往往需要恢复数据的情况出现在删除后一周以内,因此能快速反应,恢复至生产环境,大大降低了从带库恢复和挑选的数据准备时间;整个流程通过参数化控制,健壮性强,降低人工干预的风险和一次性版本开发的成本。
在银行系统中,数据的备份必须保证相应数据表或文件的静止状态,在单一环境下会直接导致拒绝服务,影响正常的业务应用。因此本发明实施例的银行历史数据参数化备份恢复方法设置有P1环境和P2环境;其中P1环境,是指核心银行系统的正常生产环境,执行核心银行系统的所有业务处理,包括联机处理和批量处理,核心银行系统在P1环境进行业务处理时,会产生大量数据;P2环境,是指核心银行系统的FLASH COPY环境,P2环境与P1环境同步,执行对核心银行系统的数据进行筛选、采集、上传和下传等处理;在银行系统中,P2环境是P1环境的镜像环境,P环境的同步数据存储有P1环境的全部完整数据;核心银行系统在P1环境下,为提升效率,提高响应时间,需要及时删除失效数据,P1删除的失效数据和未删除的其他数据在P2环境中全部完整保存。在进行数据备份和恢复时,核心银行系统中设置有带库和主机硬盘;带库,是指磁带仓库,用于提供大量数据的永久存储,核心银行系统将全部历史数据存放在带库中,专门用作存储历史数据,带库一般为脱机状态,不支持实时存取;主机硬盘可以用于临时的数据存储,因为主机硬盘的反应速度快,支持同步读写,但主机硬盘的存储空间比带库小,因此主机硬盘可以实时连接在核心银行系统中,进行数据的实时同步读写,可以减少从带库中恢复和挑选数据的时间,实现快速高效的数据恢复。
在具体实施本发明实施例的银行历史数据参数化备份恢复方法时,前述的根据P1环境删除的失效数据,确定失效数据的主键,在实施例中可以包括:银行核心系统为提升效率,提高响应时间,在P1环境下删除失效数据,分析删除的失效数据,可以得到失效数据的主键。
在具体实施本发明实施例的银行历史数据参数化备份恢复方法时,前述的根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻,在实施例中,可以包括:因为P2环境是P2环境的镜像环境,P2环境完全同步P1环境,因此P2环境内的同步数据完整保存了P1环境的所有数据,包括P1环境删除的失效数据,根据前述分析失效数据得到的失效数据主键,从P2环境的同步数据中筛选出备份文件,保存至主机硬盘,由于主机硬盘支持同步存取,近期备份的文件保存在主机硬盘,可以快速反应并恢复至P1环境,大大降低了从带库恢复和挑选备份文件的数据准备时间;前述的备份文件包括删除时刻;在实施例中,前述删除时刻,可以是在生成备份文件时,备份文件的命名中带有时间戳,该时间戳用于准确的记载删除时刻。
在具体实施本发明实施例的银行历史数据参数化备份恢复方法时,前述的将主键和删除时刻追加至索引文件,在实施例中,可以包括:为了能够实现快速定位备份文件,可以将上述分析失效数据得到的主键和备份文件的删除时刻追加至索引文件,极大的减少定位目标数的时间,快速完成数据准备。在实施例中,由于索引文件一般占用的存储空间较小,索引文件可以设置于主机硬盘中,也可以设置在带库中,还可以设置于单独的索引文件存储装置中。
在具体实施本发明实施例的银行历史数据参数化备份恢复方法时,前述的将备份文件从主机硬盘备份至带库,参数化设置备份文件在主机硬盘的保留时长,在实施例中,可以包括将上述保存至主机硬盘的备份文件备份至带库,进行永久保存,由于主机硬盘的存储空间比带库小,因此需要参数化设置备份文件在主机硬盘的保留时长,及时清理备份文件以节省存储空间,使主机硬盘能够保持在一个快速同步存取状态。
在具体实施本发明实施例的银行历史数据参数化备份恢复方法时,前述的在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境,在实施例中,可以包括:在需要进行目标数据的恢复时,根据索引文件的主键和删除时刻,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境。
前述的根据P1环境删除的失效数据,确定失效数据的主键,在一个实施例中,还可以包括:获取P1环境删除的失效数据;分析失效数据之间的共性和区别,获取失效数据的参数化变量;分析失效数据的参数化变量,确定失效数据的主键。在一个实施例中,前述的失效数据的主键,至少包括:款账号,贷款账号,机构账号,卡号,合同号,押品号,保证号和额度号,上述七大类数据的主键,在核心银行系统中能够完全表征所有涉及的数据表和文件。实施例中,首先获取P1环境删除的失效数据,目前共涉及130多张表和大文件数据;然后,分析上述失效数据之间的共性和区别,提取失效数据的参数化变量,具体主要是从业务功能角度提取主要参数化变量;银行业务主要分为几大类:存款业务、贷款业务、支付业务和其他业务,核心银行系统实质是一个以客户为中心的账务系统,银行业务最底层的账务往来介质为账号,因此提取账号则基本可以记录下所有的账务流水,目前共存在三类实体账号:存款账号、贷款账号、机构账号。在账号之上两类可见的实体介质:银行卡和存折,其中存折直接采用账号标识,银行卡涉及新的标识银行卡号,银行卡号和存折基本可以标识存款业务、支付业务和其他业务所有场景。贷款业务除涉及卡号和存折外还有几大单独的实体:合同、押品、保证和额度;通过以上分析,逐个表格大文件的进行变量分析,检验是否所有表和大文件是否都与以上参数化变量存在直接或间接依赖关系。最终确定七大类数据的主键:存款账号、贷款账号、机构账号、卡号、合同号、押品号、保证号和额度号。在实施例中,在分析失效数据之间的共性和区别,获取失效数据的参数化变量之前,还包括设置失效数据的备份标识;前述备份标识用于表示该失效数据是否需要备份,起到了开关的作用。在实施例中,失效数据设置备份标识后,该标识该失效数据代表需要进行备份,然后进行后续的分析和备份操作;失效数据没有设置备份标识,则该失效数据打表不需要进行备份。
在前述的参数化设置备份文件在主机硬盘的保留时长之后,在一个实例中,还包括:在主机硬盘中备份文件的存储时长达到保留时长时,将备份文件从主机硬盘中删除。在实施例中,由于主机硬盘的存储空间有限,需要及时删除存储在主机硬盘中存储的备份文件,以使主机硬盘能够保持在一个快速同步存取状态,因此需要设置备份文件的保留时长,由于在带库中已经完整备份了备份文件,不必担心文件丢失的问题;因此在主机硬盘中备份文件的存储时长达到保留时长时,及时将该达到存储时长的备份文件从主机硬盘中删除;上述主机硬盘中存储的备份文件的保留时长,可以根据实际需要或数据恢复规律进行设定;例如,在银行正常生产过程中,经过实际生产观察,需要进行历史数据恢复时大约出现在失效数据删除后的一周至内,因此可以设置上述保留时长为7天,使得7天内的备份文件在需要被恢复时,可以直接从主机硬盘中进行定位和恢复,减少了从带库中定位和恢复数据的准备时间。
进一步的,为了更好的节省主机硬盘的存储空间,在索引文件保存在主机硬盘中时,还可以设置索引文件的保留时长,在主机硬盘中索引文件的存储时长达到保留时长时,将索引文件从主机硬盘中备份至带库,存储为历史索引文件,然后删除主机硬盘中的索引文件。在需要进行数据恢复时,先确定主机硬盘中的索引文件是否包括目标数据的删除时刻,在包括目标数据删除时刻时,直接利用该目标数据的删除时刻,从主机硬盘或带库的备份文件中筛选出目标数据;在主机硬盘中的索引文件不包括目标数据的删除时刻时,搜索带库中存储的历史索引文件,查找目标数据的删除时刻,恢复至索引文件中,再利用该恢复的目标数据删除时刻,从主机硬盘或带库的备份文件中筛选出目标数据。
前述的在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,包括:在需要恢复目标数据时,通过索引文件确定目标数据的删除时刻;根据目标数据的删除时刻,确定恢复目标数据的时间段;根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据。在实施例中,在需要进行目标数据恢复时,同索引文件中存储的多个删除时刻中,筛选出目标数据的删除时刻;在根据目标数据的删除时刻,确定恢复目标数据的时间段,由于数据的存储和提取都需要一定的时长,上述确定的恢复目标数据的时间段是包括目标数据从开始存储到存储结束的时间段,也就是恢复数据的起止时间;再根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据。
前述的根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据,包括:在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长内时,从主机硬盘的备份文件中筛选出目标数据;在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长外时,从带库的备份文件中筛选出目标数据。在实施例中,由于备份文件保留时长的参数化设置,在进行数据恢复时,需要首先确定恢复目标数据的时间段是否处于备份文件在主机硬盘的保留时长内,在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长内时,从主机硬盘的备份文件中筛选出目标数据,此时由于直接从主机硬盘中进行同步数据存取,数据恢复的速度较快;在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长外时,从带库的备份文件中筛选出目标数据,此时由于需要从带库中进行筛选,数据恢复速度相对从主机硬盘中稍慢。
在本发明实施例中,还可以参数化的设置是否需要提高数据恢复的并发度;当遇到需要恢复的目标数据较大时,可以参数化的增加并发度,提高数据的恢复效率。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述银行历史数据参数化备份恢复方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行实现上述银行历史数据参数化备份恢复方法的计算机程序。
本发明实施例中还提供了一种银行历史数据参数化备份恢复装置,如下面的实施例所述。由于该装置解决问题的原理与一种银行历史数据参数化备份恢复方法相似,因此该装置的实施可以参见一种银行历史数据参数化备份恢复方法的实施,重复之处不再赘述。
如图2本发明实施例一种银行历史数据参数化备份恢复装置示意图所示,本发明实施例还提供一种银行历史数据参数化备份恢复装置,包括:
备份模块201,恢复模块202,参数化模块203;
备份模块201,用于根据P1环境删除的失效数据,确定失效数据的主键;根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;将主键和删除时刻追加至索引文件;将备份文件从主机硬盘备份至带库;
恢复模块202,用于在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境;
参数化模块203,用于参数化设置备份文件在主机硬盘的保留时长。
一个实施例中,所述备份模块具体用于:
获取P1环境删除的失效数据;
分析失效数据之间的共性和区别,获取失效数据的参数化变量;
分析失效数据的参数化变量,确定失效数据的主键。
一个实施例中,所述主键至少包括:存款账号,贷款账号,机构账号,卡号,合同号,押品号,保证号和额度号。
一个实施例中,所述备份模块还用于:
在参数化模块参数化设置备份文件在主机硬盘的保留时长之后,在主机硬盘中备份文件的存储时长达到保留时长时,将备份文件从主机硬盘中删除。
一个实施例中,所述恢复模块具体用于:
在需要恢复目标数据时,通过索引文件确定目标数据的删除时刻;
根据目标数据的删除时刻,确定恢复目标数据的时间段;
根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据。
一个实施例中,所述恢复模块具体用于:
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长内时,从主机硬盘的备份文件中筛选出目标数据;
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长外时,从带库的备份文件中筛选出目标数据。
如图3本发明实施例一种银行历史数据参数化备份恢复装置的备份模块示意图所示,为了最大程度避免对生产业务应用的影响,该模块运行在P2环境,在整个机制中起到数据准备的作用。备份模块具体工作流程:P1环境删除当日失效数据,将成功删除的失效数据的主键传输至P2环境,由于是镜像环境,此时P2环境还存有当日将被清理的完整数据,通过主键可快速定位数据并写入备份文件中,备份文件的命名中带有删除时刻(可以是时间戳);此外将备份文件的主键和删除时间追加到索引文件中,为方便随时查询定位删除数据。为节省存储空间,后续根据参数及时清理超时的备份文件和索引文件。
如图4本发明实施例一种银行历史数据参数化备份恢复装置的恢复模块示意图所示,为尽量保证生产环境的稳定,提高效率,降低风险。数据准备阶段运行在P2环境,数据恢复阶段运行在P1环境。恢复模块具体工作流程:当有恢复需求时,首先通过索引文件定位目标数据的删除时刻,然后确定恢复目标数据的删除时间段,根据目标数据所在时间段配置参数,运行程序备份文件从主机硬盘或带库中筛选出目标文件,将记录合并传输至P1环境,恢复到生产环境或数据库中。
本发明实施例的参数化模块,起到串联整个备份恢复机制的作用。主要有几个重要的参数:①备份标识,设置删除的失效数据的表或文件是否需要备份,起到开关的作用;②备份文件保留周期,设置该备份文件的留存时长,超时将触发清理动作;③恢复起止时间,设置目标数据的恢复时间段,方便的筛选备份文件;④并发度,当恢复数据较大时,可设置该参数,增加并发度,提高恢复效率。本发明实施例的参数化模块,起到了调整整个备份恢复机制的作用。参数化模块进一步的用于提取驱动整个备份恢复流程的关键参数,首先建立标识备份实体的变量,使用表名或文件名;考虑到CPU资源利用的有效性,增设开关,可随时根据系统资源调整,备份那些最重要的文件。考虑到存储资源的有效利用,增设备份文件保留周期,及时删除超期文件,释放存储资源。此外还需要恢复参数,可自动从大量备份文件中筛选目标文件用于快速恢复。
综上,本发明实施例提供的一种银行历史数据参数化备份恢复方法和装置,通过建立删除数据索引文件,快速精确的定位目标数据所在备份文件,极大减少了当前需求分析和定位时间且定位准确;由于近期备份文件保存在主机硬盘,且往往需要恢复数据的情况出现在删除后一周以内,因此能快速反应,恢复至生产环境,大大降低了从带库恢复和挑选的数据准备时间;整个流程通过参数化控制,健壮性强,降低人工干预的风险和一次性版本开发的成本。从成本角度大大降低人力投入,提高历史数据查询和异常解决时效性,同时也很好的降低了生产风险,保证安全运行。此外根据核心银行系统数据间依赖关系,对七张主表建立主键索引文件,方便在查询时快速定位删除数据所在备份文件。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (14)

1.一种银行历史数据参数化备份恢复方法,其特征在于,包括:
根据P1环境删除的失效数据,确定失效数据的主键;
根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;
将主键和删除时刻追加至索引文件;
将备份文件从主机硬盘备份至带库,参数化设置备份文件在主机硬盘的保留时长;
在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境。
2.如权利要求1所述的方法,其特征在于,所述根据P1环境删除的失效数据,确定失效数据的主键,包括:
获取P1环境删除的失效数据;
分析失效数据之间的共性和区别,获取失效数据的参数化变量;
分析失效数据的参数化变量,确定失效数据的主键。
3.如权利要求1或2所述的方法,其特征在于,所述主键至少包括:存款账号,贷款账号,机构账号,卡号,合同号,押品号,保证号和额度号。
4.如权利要求1所述的方法,其特征在于,所述参数化设置备份文件在主机硬盘的保留时长之后,还包括:
在主机硬盘中备份文件的存储时长达到保留时长时,将备份文件从主机硬盘中删除。
5.如权利要求1所述的方法,其特征在于,所述在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,包括:
在需要恢复目标数据时,通过索引文件确定目标数据的删除时刻;
根据目标数据的删除时刻,确定恢复目标数据的时间段;
根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据。
6.如权利要求5所述的方法,其特征在于,所述根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据,包括:
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长内时,从主机硬盘的备份文件中筛选出目标数据;
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长外时,从带库的备份文件中筛选出目标数据。
7.一种银行历史数据参数化备份恢复装置,其特征在于,包括:备份模块,恢复模块,参数化模块;
备份模块,用于根据P1环境删除的失效数据,确定失效数据的主键;根据失效数据的主键,从P2环境的同步数据中确定备份文件保存至主机硬盘;所述备份文件包括:删除时刻;将主键和删除时刻追加至索引文件;将备份文件从主机硬盘备份至带库;
恢复模块,用于在需要恢复目标数据时,根据索引文件,从主机硬盘或带库的备份文件中筛选出目标数据,将目标数据恢复至P1环境;
参数化模块,用于参数化设置备份文件在主机硬盘的保留时长。
8.如权利要求7所述的装置,其特征在于,所述备份模块具体用于:
获取P1环境删除的失效数据;
分析失效数据之间的共性和区别,获取失效数据的参数化变量;
分析失效数据的参数化变量,确定失效数据的主键。
9.如权利要求7或8所述的装置,其特征在于,所述主键至少包括:存款账号,贷款账号,机构账号,卡号,合同号,押品号,保证号和额度号。
10.如权利要求7所述的装置,其特征在于,所述备份模块还用于:
在参数化模块参数化设置备份文件在主机硬盘的保留时长之后,在主机硬盘中备份文件的存储时长达到保留时长时,将备份文件从主机硬盘中删除。
11.如权利要求7所述的装置,其特征在于,所述恢复模块具体用于:
在需要恢复目标数据时,通过索引文件确定目标数据的删除时刻;
根据目标数据的删除时刻,确定恢复目标数据的时间段;
根据恢复目标数据的时间段,从主机硬盘或带库的备份文件中筛选出目标数据。
12.如权利要求11所述的装置,其特征在于,所述恢复模块具体用于:
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长内时,从主机硬盘的备份文件中筛选出目标数据;
在恢复目标数据的时间段处于备份文件在主机硬盘的保留时长外时,从带库的备份文件中筛选出目标数据。
13.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现权利要求1至6任一项所述银行历史数据参数化备份恢复方法。
14.一种计算机可读存储介质,所述计算机可读存储介质存储有执行实现权利要求1至6任一项所述银行历史数据参数化备份恢复方法的计算机程序。
CN201910890697.7A 2019-09-20 2019-09-20 银行历史数据参数化备份恢复方法和装置 Active CN110597669B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910890697.7A CN110597669B (zh) 2019-09-20 2019-09-20 银行历史数据参数化备份恢复方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910890697.7A CN110597669B (zh) 2019-09-20 2019-09-20 银行历史数据参数化备份恢复方法和装置

Publications (2)

Publication Number Publication Date
CN110597669A true CN110597669A (zh) 2019-12-20
CN110597669B CN110597669B (zh) 2022-10-11

Family

ID=68861455

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910890697.7A Active CN110597669B (zh) 2019-09-20 2019-09-20 银行历史数据参数化备份恢复方法和装置

Country Status (1)

Country Link
CN (1) CN110597669B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114201341A (zh) * 2021-11-24 2022-03-18 江苏金农股份有限公司 基于云平台的自动数据备份系统、方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106445738A (zh) * 2016-09-13 2017-02-22 郑州云海信息技术有限公司 一种数据库备份方法及装置
CN107977403A (zh) * 2017-11-14 2018-05-01 中国银行股份有限公司 历史数据查询方法及装置
CN107992512A (zh) * 2017-10-20 2018-05-04 中国建设银行股份有限公司上海市分行 一种数据迁移的方法、系统及计算机可读存储介质
CN108959400A (zh) * 2018-06-05 2018-12-07 中国银行股份有限公司 银行系统历史数据清理方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106445738A (zh) * 2016-09-13 2017-02-22 郑州云海信息技术有限公司 一种数据库备份方法及装置
CN107992512A (zh) * 2017-10-20 2018-05-04 中国建设银行股份有限公司上海市分行 一种数据迁移的方法、系统及计算机可读存储介质
CN107977403A (zh) * 2017-11-14 2018-05-01 中国银行股份有限公司 历史数据查询方法及装置
CN108959400A (zh) * 2018-06-05 2018-12-07 中国银行股份有限公司 银行系统历史数据清理方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114201341A (zh) * 2021-11-24 2022-03-18 江苏金农股份有限公司 基于云平台的自动数据备份系统、方法及装置
CN114201341B (zh) * 2021-11-24 2022-10-18 江苏金农股份有限公司 基于云平台的自动数据备份系统、方法及装置

Also Published As

Publication number Publication date
CN110597669B (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
CN106610876B (zh) 数据快照的恢复方法及装置
CN108959400B (zh) 银行系统历史数据清理方法及装置
CN110795287B (zh) 数据恢复方法、系统、电子设备及计算机存储介质
CN104317960A (zh) 一种批处理作业的处理方法和装置
EP3089051B1 (en) Database rollback using wal
KR101643729B1 (ko) 시간 기반 데이터에 대한 백업, 리스토어, 및 마운트를 위한 데이터 관리 시스템 및 방법
CN112612775B (zh) 一种数据存储方法、装置、计算机设备及存储介质
CN110543446A (zh) 一种基于快照的区块链直接归档方法
CN104765651A (zh) 一种数据处理方法和装置
CN106991606B (zh) 交易数据处理方法及装置
CN110597669B (zh) 银行历史数据参数化备份恢复方法和装置
EP3149587B1 (en) System and method for the production of job level pre-processed backup of critical data and/or datasets in a mainframe computing environment
CN107908697B (zh) 主机批处理作业结果的自动采集方法及装置
US11762688B2 (en) Systems and methods for batch job execution in clustered environments using execution timestamp granularity between service instances having different system times
CN111125047B (zh) 冷热数据目录识别方法及装置
CN112685360B (zh) 内存数据的持久化方法及装置、存储介质、计算机设备
CN110221952B (zh) 业务数据的处理方法及装置、业务数据处理系统
JP2001356946A (ja) ワークフロー実行方法および装置とワークフロー実行プログラムを記録した記録媒体
JP2003085021A (ja) リカバリ・リスタート機能を備えたバッチ処理システム、リカバリ・リスタート機能を備えたバッチ処理システム用プログラム、及びそのプログラムを記録した記録媒体
CN112612648B (zh) 一种SQL Server数据库恢复方法、终端设备及存储介质
CN106709803B (zh) 支付业务监控处理方法及装置
CN112307007B (zh) 数据库清理方法及装置
CN115454725A (zh) 数据库备份方法、装置、电子设备和存储介质
JP6891533B2 (ja) データベース装置
CN117149702A (zh) 一种业务数据的处理方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant