CN105959169B - 一种交易数据处理系统及方法 - Google Patents
一种交易数据处理系统及方法 Download PDFInfo
- Publication number
- CN105959169B CN105959169B CN201610569658.3A CN201610569658A CN105959169B CN 105959169 B CN105959169 B CN 105959169B CN 201610569658 A CN201610569658 A CN 201610569658A CN 105959169 B CN105959169 B CN 105959169B
- Authority
- CN
- China
- Prior art keywords
- transaction
- line
- message
- transaction message
- processing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本发明提供一种交易数据处理系统及方法,包括:生产中心的联机交易处理系统对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入、将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;在生产中心发生故障时,异地备份中心的联机交易处理系统对客户提交的交易报文进行处理;异地备份中心的交易重做系统对从异地备份中心的联机交易处理系统中获取的故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。本发明方案具有如下有益效果:与交易关联,可以重现交易;恢复时间短,业务不中断,对外服务不受影响。
Description
技术领域
本发明涉及数据零丢失保护技术领域,特别涉及一种交易数据处理系统及方法。
背景技术
对于银行系统而言,除开展自身业务之外,更多数据来自上下级银行间的财务汇兑与结算。当灾害(比如断电、死机、网络崩溃等)发生时,可能导致一些数据丢失,为了防止数据丢失,现有大多数采用的是基于数据库级的数据零丢失保护技术和采用存储的远程镜像进行数据零丢失保护,但是这两种技术存在以下缺点。
基于数据库级的数据零丢失保护技术针对数据本身,与没有交易关联,无法重现交易。例如,Oracle的Zero Data Loss Recovery Appliance(恢复一体机),通过将数据库日志缓冲区的记录发送到恢复一体机中,由恢复一体机捕获数据库的变化,通过恢复一体机可以将数据恢复到任一时间节点。所有的变化与恢复,都是数据库级的备份与恢复,无法重现联机交易发生的整个过程,也没有交易发生过程中的日志记录,对数据的有效性无法通过交易进行验证,存在一定的业务风险。
另外,基于数据库级的数据零丢失保护技术,会对实时运行的生产中心数据库带来性能上的影响,同时为保证高可用性,冗余方案的设计也增大了企业成本投入。例如,Oracle的Data Guard同步传输SYNC(synchronous transport)需要确认事务恢复所需要的redo数据已经被写入备用数据库的磁盘上,才允许认可主库提交操作成功,所以在等待备库确认redo消息已写入的这段时间,主库的性能受到影响。为降低性能影响,可以启用不等待备库确认的模式,但为了保证数据零丢失,必须增加备库的冗余,当至少有一个备库确认了,主库就可以提交成功,这无疑又增加了投入和运维的成本。
而采用存储的远程镜像进行数据零丢失保护,恢复过程时间长,而且必须完成数据库的恢复以后,业务系统才能启动和恢复,交易中断的时间较长。例如,EMC的SRDF(Symmetrix Remote Data Facility)是业界采用较多的提供完整业务持续性能力的解决方案,当A地主机发生故障,恢复的过程首先需要把备份中心Target Symmetrix设置为CPU可读/写状态,然后停止链路,最后备份中心启动应用。在整个过程中,业务处于暂停状态,无法对外提供服务。
发明内容
本发明实施例提供了一种交易数据处理系统,与交易关联,可以重现交易;不会对实时运行的生产中心数据库带来性能上的影响;恢复时间短,业务不中断,对外服务不受影响。该系统包括:
生产中心的联机交易处理系统、异地备份中心的联机交易处理系统和异地备份中心的交易重做系统;
所述生产中心的联机交易处理系统,用于对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和已处理的交易报文;
所述异地备份中心的联机交易处理系统,用于接收远程同步写入的交易报文和已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
所述异地备份中心的交易重做系统,用于在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
在一个实施例中,所述生产中心的联机交易处理系统包括第一通讯前置装置和第一联机应用装置;所述异地备份中心的联机交易处理系统包括第二通讯前置装置、第二联机应用装置和第二联机交易数据库;所述异地备份中心的交易重做系统包括交易重做应用装置;
所述第一通讯前置装置,用于接收客户提交的交易报文;并将交易报文和已处理的交易报文远程同步写入第二通讯前置装置中;
所述第一联机应用装置,用于对客户提交的交易报文进行处理,得到已处理的交易报文,将已处理的交易报文返回给第一通讯前置装置;将交易报文和已处理的交易报文进行格式转换,获得交易处理结果,将交易处理结果远程异步写入第二联机交易数据库中;
所述第二通讯前置装置,用于接收远程同步写入的交易报文和已处理的交易报文;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文;
所述第二联机应用装置,用于在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
所述交易重做应用装置,用于在所述生产中心的联机交易处理系统发生故障时,从第二通讯前置装置中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果;
所述第二联机交易数据库,用于存储远程异步写入的交易处理结果,第二联机应用装置对客户提交的交易报文进行处理后得到的交易处理结果,交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
在一个实施例中,所述生产中心的联机交易处理系统还包括用于存储交易处理结果的第一联机交易数据库;
所述异地备份中心的交易重做系统还包括重做交易数据库,用于存储交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果;
所述第二联机交易数据库具体用于:
存储从重做交易数据库中获取的交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
在一个实施例中,所述生产中心的联机交易处理系统包括联机参数数据库;
所述联机参数数据库,用于存储生产中心的联机交易处理系统的业务参数;
所述第二联机应用装置,还用于从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置;
所述交易重做应用装置,还用于从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置。
在一个实施例中,所述异地备份中心的交易重做系统还包括重做交易参数数据库;
所述重做交易参数数据库,用于存储从联机参数数据库中获取的所述业务参数。
本发明实施例提供了一种交易数据处理方法,与交易关联,可以重现交易;不会对实时运行的生产中心数据库带来性能上的影响;恢复时间短,业务不中断,对外服务不受影响。该方法包括:
生产中心的联机交易处理系统对对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和已处理的交易报文;
异地备份中心的联机交易处理系统接收远程同步写入的交易报文、已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
异地备份中心的交易重做系统在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
在一个实施例中,该方法具体包括:
生产中心的联机交易处理系统中的第一通讯前置装置接收客户提交的交易报文;并将已处理的交易报文远程同步写入第二通讯前置装置中;
生产中心的联机交易处理系统中的第一联机应用装置对客户提交的交易报文进行处理,得到已处理的交易报文,将已处理的交易报文返回给第一通讯前置装置;将交易报文和已处理的交易报文进行格式转换,获得交易处理结果,将交易处理结果远程异步写入异地备份中心的联机交易处理系统中的第二联机交易数据库中;
异地备份中心的联机交易处理系统的第二通讯前置装置接收远程同步写入的交易报文和已处理的交易报文;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文;
异地备份中心的联机交易处理系统的第二联机应用装置在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
异地备份中心的交易重做应用系统的交易重做应用装置在所述生产中心的联机交易处理系统发生故障时,从第二通讯前置装置中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储远程异步写入的交易处理结果,第二联机应用装置对客户提交的交易报文进行处理后得到的交易处理结果,交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
在一个实施例中,还包括:
生产中心的联机交易处理系统的第一联机交易数据库存储交易处理结果;
异地备份中心的交易重做系统的重做交易数据库存储交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储从重做交易数据库中获取的交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
在一个实施例中,还包括:
生产中心的联机交易处理系统的联机参数数据库存储生产中心的联机交易处理系统的业务参数;
异地备份中心的联机交易处理系统的第二联机应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置;
异地备份中心的交易重做系统的交易重做应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置。
在一个实施例中,还包括:
异地备份中心的交易重做系统的重做交易参数数据库存储从联机参数数据库中获取的所述业务参数。
在本发明实施例中,该系统通过生产中心的联机交易处理系统将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中,将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;在生产中心的联机交易处理系统发生故障时,通过异地备份中心的联机交易处理系统可以启动交易处理,对后续客户提交的交易报文进行处理;通过异地备份中心的交易重做系统从异地备份中心的联机交易处理系统中获取故障时间点对应的交易报文和已处理的交易报文,对交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果,这样所有的数据都与交易关联,可以重现交易;本发明中的交易重做系统处于异地备份中心,与生产中心的联机交易处理系统没有关联,不会对实时运行的生产中心数据库带来性能上的影响;本发明中的交易重做系统与异地备份中心的联机交易处理系统是相对独立的,当交易切换到异地备份中心后能立即提供对外服务,而交易重做系统可以同时处理故障期间的交易,两者互不影响,故在这种模式下,对外服务不受任何影响,业务也不会因为交易重做发生任何中断。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种日常状态下的交易数据处理系统结构示意图;
图2是本发明实施例提供的一种重做状态下的交易数据处理系统结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
现有技术中,为了保证数据零丢失所采用的技术存在如下缺点:只针对数据本身,与交易没有关联,无法重现交易;会对实时运行的生产中心数据库带来性能上的影响;恢复过程时间长,而且必须完成数据库的恢复以后,业务系统才能启动和恢复,交易中断的时间较长。针对现有技术存在的缺点,本发明提出一种交易数据处理系统及方法。
本发明提出的交易数据处理系统包括:生产中心的联机交易处理系统、异地备份中心的联机交易处理系统和异地备份中心的交易重做系统;
所述生产中心的联机交易处理系统,用于对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和已处理的交易报文;
所述异地备份中心的联机交易处理系统,用于接收远程同步写入的交易报文、已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
所述异地备份中心的交易重做系统,用于在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
具体实施时,该交易数据处理系统有两种工作状态,一种是日常状态下,本发明在该状态下的结构图如图1所示,第二种是重做状态下,本发明在该状态下的结构图如图2所示。
由图1和图2可知,生产中心的联机交易处理系统可以包括第一通讯前置装置(可简称通讯前置)、第一联机应用装置(简称联机应用)和第一联机交易数据库;异地备份中心的联机交易处理系统包括第二通讯前置装置(可简称通讯前置)、第二联机应用装置(简称联机应用)和第二联机交易数据库;异地备份中心的交易重做系统(可以说是追补系统)包括交易重做应用装置(即追补应用)和重做交易数据库。
由图1可知,在日常状态下,第一通讯前置装置在接收到客户提交的交易报文后,会将交易报文转发给第一联机应用装置,然后通过第一联机应用装置对交易报文进行处理,得到已处理的交易报文(可以包括交易记录和账务变化数据)。由于交易报文不能直接存储到数据库中,需要将交易报文和已处理的交易报文进行格式转换,获得交易处理结果(其格式为数据库可以存储的数据格式),然后将交易处理结果存储到第一联机交易数据库中。同时第一通讯前置装置还会接收第一联机应用装置返回的已处理的交易报文,通过远程存储复制技术(两地相隔距离在1000公里以上),将交易报文和已处理的交易报文远程同步写入第二通讯前置装置中。
生产中心的第一联机应用装置在向第一联机交易数据库记录交易处理结果的同时,通过远程异步调用的方式将交易处理结果写入异地备份中心的联机交易数据库(第二联机交易数据库)中。为避免异地备份中心写入失败对生产中心的影响,系统采用了异步写入模式,因而异地备份中心的联机交易数据库中的数据至少会延迟一分钟(延迟时间可以人为设置,也就是说也可以不设置为一分钟)。
异地备份中心日常状态下不处理交易,但是来自远程存储复制的交易报文和已处理的交易报文实时存储在异地备份中心的通讯前置(第二通讯前置装置)上,联机交易数据库(第二联机交易数据库)也接收来自生产中心的交易处理结果。
由图2可知,重做状态:当生产中心发生整体故障时,即生产中心的联机交易处理系统发生故障时,两地中心的通讯前置的远程存储复制断开无法再进行交易报文和已处理的交易报文的传输,同时生产中心的联机应用也无法将交易处理结果再异步写入异地备份中心的联机交易数据库。此后所有的交易处理由异地备份中心接管,也就是说异地备份中心的联机交易处理系统中的第二联机应用装置会对后续客户提交的交易报文进行处理,获得相应的已处理的交易报文(交易记录和账务变化),并将后续的交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果,并将其记入本地数据库(第二联机交易数据库)中。
由于交易处理结果是通过远程异步写入方式由第一联机应用装置写入第二联机交易数据库中的,因此,异地备份中心缺少从生产中心异步写入的最后一笔交易到备份中心接管的第一笔交易之间大约一分钟的交易记录和账务变化数据。针对该问题,由于异地备份中心的通讯前置通过存储实时复制保留了所有的已处理的交易报文,交易重做系统中的交易重做应用装置可以通过读取异地备份中心通讯前置(第二通讯前置装置)中记录的故障时间点之前任一时刻的交易报文和对应的已处理的交易报文,将交易报文和对应的已处理的交易报文进行格式转换,获得相应的交易处理结果,这样可以完全还原缺少的这一分钟的交易和账务变化情况,同时将相应的交易处理结果写入重做交易数据库中(也可以将相应的交易处理结果直接存入第二联机交易数据库中)。这样交易重做应用装置可以通过获取重做起止时间参数,还原任一时间段内的交易。
当将相应的交易处理结果存入交易重做数据库中后,需要将相应的交易处理结果从交易重做数据库导入异地备份中心的联机交易处理系统中的联机交易数据库中,从而实现交易的零丢失,进而保证账务系统的连续性和清算结果的准确性。
具体实施时,由图2可知,生产中心的联机交易处理系统还可以包括联机参数数据库,用于存储生产中心的联机交易处理系统的业务参数;异地备份中心的交易重做系统也可以包括重做交易参数数据库(即追补参数数据库),用于存储从联机参数数据库中获取的业务参数。具体的,交易重做系统每日通过固定作业从异地备份中心的联机参数数据库中将联机参数导入到交易重做系统的追补参数数据库中,第二联机应用装置根据联机参数数据库中的业务参数进行配置,交易重做应用装置也根据相同的业务参数进行配置,以保证交易重做系统的业务参数与生产中心保持一致。
以上所使用的,术语“装置”、“单元”或者“模块”可以是实现预定功能的软件和/或硬件的组合。尽管以上实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
基于同一发明构思,本发明实施例中还提供了一种交易数据处理方法,如下面的实施例所述。由于交易数据处理方法解决问题的原理与交易数据处理装置相似,因此交易数据处理方法的实施可以参见交易数据处理装置的实施,重复之处不再赘述。
该交易数据处理方法包括:
生产中心的联机交易处理系统对对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和已处理的交易报文;
异地备份中心的联机交易处理系统接收远程同步写入的交易报文、已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
异地备份中心的交易重做系统在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
具体实施时,该方法具体包括:
生产中心的联机交易处理系统中的第一通讯前置装置接收客户提交的交易报文;并将交易报文和已处理的交易报文远程同步写入第二通讯前置装置中;
生产中心的联机交易处理系统中的第一联机应用装置对客户提交的交易报文进行处理,得到已处理的交易报文,将已处理的交易报文返回给第一通讯前置装置;将交易报文和已处理的交易报文进行格式转换,获得交易处理结果,将交易处理结果远程异步写入异地备份中心的联机交易处理系统中的第二联机交易数据库中;
异地备份中心的联机交易处理系统的第二通讯前置装置接收远程同步写入的交易报文和已处理的交易报文;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文;
异地备份中心的联机交易处理系统的第二联机应用装置在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
异地备份中心的交易重做应用系统的交易重做应用装置在所述生产中心的联机交易处理系统发生故障时,从第二通讯前置装置中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储远程异步写入的交易处理结果,第二联机应用装置对客户提交的交易报文进行处理后得到的交易处理结果,交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
具体实施时,该方法还包括:
生产中心的联机交易处理系统的第一联机交易数据库存储交易处理结果;
异地备份中心的交易重做系统的重做交易数据库存储交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储从重做交易数据库中获取的交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
具体实施时,该方法还包括:
生产中心的联机交易处理系统的联机参数数据库存储生产中心的联机交易处理系统的业务参数;
异地备份中心的联机交易处理系统的第二联机应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置;
异地备份中心的交易重做系统的交易重做应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置。
具体实施时,该方法还包括:
异地备份中心的交易重做系统的重做交易参数数据库存储从联机参数数据库中获取的所述业务参数。
综上所述,本发明具有如下有益效果:
(1)本发明是交易级数据零丢失保护方案,能够完全复现业务发生的过程和场景,便于通过业务追溯交易数据变化。在联机交易系统中,有相当一部分交易是具有前后关联性的,当按交易发生的时序重做交易时,中间结果和最终结果都被保留下来。相对于数据库级的数据零丢失保护方案,具有更高的可追溯性和业务可信度。实现应用重做的关键是获取通讯前置主机的通讯报文(交易报文)。对于联机交易而言,通讯报文是系统的交易源头。异地备份中心通讯前置的交易报文来自于生产中心的存储级远程复制。采用存储级数据复制可以将通讯报文由生产中心实时同步到异地备份中心,当生产中心发生整体故障,异地备份中心仍保留了故障时间点之前的全部通讯报文,同样部署在异地备份中心的交易重做系统,可以按时间段读取异地备份中心通讯前置上的通讯报文并装载到内存中,顺序重做该时间段内的交易并将交易处理结果记入交易重做系统的联机数据库中,将所有没有写入异地备份中心联机交易数据库中的交易处理结果全部生成并恢复回来,不存在任何交易数据的丢失,完全实现了交易数据零丢失。
(2)本发明提供的数据零丢失保护模式,对生产系统没有压力,且网络带宽占用资源少。在日常状态下,生产中心的数据(交易处理结果)通过异步方式写入远程异地备份中心。由于异步方式无需等待异地备份中心的写入确认,故当写入发生异常或写入性能降低都不会引起生产中心的连锁反应,不会对生产中心造成任何压力。
另外,由于远程同步复制只获取通讯报文,一笔联机交易的通讯报文字节大小远远小于数据库中一笔联机交易的大小,因而对网络带宽的资源占用也远低于采用数据库复制的同步方式。
(3)本发明恢复时间短,业务不中断,对外服务不受影响。通过通讯报文进行交易重做的交易重做系统,与异地备份中心的联机交易处理系统相对独立,当交易切换到异地备份中心后能立即提供对外服务,而交易重做系统可以同时处理故障期间的交易,不用等到重做交易全部处理完成后才启动对外服务,故这种模式下,对外服务不受任何影响,业务也不会因为交易重做发生任何中断。实际测试证明,重做交易的成功率达到99.5%,当生产中心整体故障的情况,RTO(Recovery Time Objective,是指灾难发生后,从IT系统当机导致业务停顿之时开始,到IT系统恢复至可以支持各部门运作、恢复运营之时,此两点之间的时间段)接近0,RPO(Recovery Point Objective,是指从系统和应用数据而言,要实现能够恢复至可以支持各部门业务运作,系统及生产数据应恢复到怎样的更新程度)也接近0。
(4)为保证交易重做系统与生产中心保持最新参数同步,每日通过定时作业导出导入业务参数(也可以说是生产参数),重做系统进行参数装载,以保证与生产中心的同步。整个作业过程可以在10分钟以内完成。
(5)单机运行的交易重做系统最大可以支持300笔/秒的处理速度,当生产中心的处理达到2000笔/秒时,交易重做系统挂载生产通讯报文的存储卷并进行加以重做,将重做结果导回异地备份中心的联机交易数据库可以在30分钟以内完成。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种交易数据处理系统,其特征在于,包括:
生产中心的联机交易处理系统、异地备份中心的联机交易处理系统和异地备份中心的交易重做系统;
所述生产中心的联机交易处理系统,用于接收客户提交的交易报文,对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和格式转换后的已处理的交易报文;
所述异地备份中心的联机交易处理系统,用于接收远程同步写入的交易报文、已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文,对客户提交的交易报文进行处理;
所述异地备份中心的交易重做系统,用于在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
2.如权利要求1所述的交易数据处理系统,其特征在于,所述生产中心的联机交易处理系统包括第一通讯前置装置和第一联机应用装置;所述异地备份中心的联机交易处理系统包括第二通讯前置装置、第二联机应用装置和第二联机交易数据库;所述异地备份中心的交易重做系统包括交易重做应用装置;
所述第一通讯前置装置,用于接收客户提交的交易报文;并将交易报文和已处理的交易报文远程同步写入第二通讯前置装置中;
所述第一联机应用装置,用于对客户提交的交易报文进行处理,得到已处理的交易报文,将已处理的交易报文返回给第一通讯前置装置;将交易报文和已处理的交易报文进行格式转换,获得交易处理结果,将交易处理结果远程异步写入第二联机交易数据库中;
所述第二通讯前置装置,用于接收远程同步写入的交易报文和已处理的交易报文;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文;
所述第二联机应用装置,用于在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
所述交易重做应用装置,用于在所述生产中心的联机交易处理系统发生故障时,从第二通讯前置装置中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果;
所述第二联机交易数据库,用于存储远程异步写入的交易处理结果,第二联机应用装置对客户提交的交易报文进行处理后得到的交易处理结果,交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
3.如权利要求2所述的交易数据处理系统,其特征在于,所述生产中心的联机交易处理系统还包括用于存储格式转换后的交易报文和格式转换后的已处理的交易报文的第一联机交易数据库;
所述异地备份中心的交易重做系统还包括重做交易数据库,用于存储交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果;
所述第二联机交易数据库具体用于:
存储从重做交易数据库中获取的交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
4.如权利要求2所述的交易数据处理系统,其特征在于,所述生产中心的联机交易处理系统包括联机参数数据库;
所述联机参数数据库,用于存储生产中心的联机交易处理系统的业务参数;
所述第二联机应用装置,还用于从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置;
所述交易重做应用装置,还用于从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置。
5.如权利要求4所述的交易数据处理系统,其特征在于,所述异地备份中心的交易重做系统还包括重做交易参数数据库;
所述重做交易参数数据库,用于存储从联机参数数据库中获取的所述业务参数。
6.一种交易数据处理方法,其特征在于,包括:
生产中心的联机交易处理系统接收客户提交的交易报文,对客户提交的交易报文进行处理,获得已处理的交易报文,将交易报文和已处理的交易报文远程同步写入异地备份中心的联机交易处理系统中;将交易处理结果远程异步写入异地备份中心的联机交易处理系统中;所述交易处理结果为格式转换后的交易报文和格式转换后的已处理的交易报文;
异地备份中心的联机交易处理系统接收远程同步写入的交易报文、已处理的交易报文和远程异步写入的交易处理结果;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文,对客户提交的交易报文进行处理;
异地备份中心的交易重做系统在所述生产中心的联机交易处理系统发生故障时,从所述异地备份中心的联机交易处理系统中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果。
7.如权利要求6所述的交易数据处理方法,其特征在于,该方法具体包括:
生产中心的联机交易处理系统中的第一通讯前置装置接收客户提交的交易报文;并将交易报文和已处理的交易报文远程同步写入第二通讯前置装置中;
生产中心的联机交易处理系统中的第一联机应用装置对客户提交的交易报文进行处理,得到已处理的交易报文,将已处理的交易报文返回给第一通讯前置装置;将交易报文和已处理的交易报文进行格式转换,获得交易处理结果,将交易处理结果远程异步写入异地备份中心的联机交易处理系统中的第二联机交易数据库中;
异地备份中心的联机交易处理系统的第二通讯前置装置接收远程同步写入的交易报文和已处理的交易报文;在所述生产中心的联机交易处理系统发生故障时,接收客户提交的交易报文;
异地备份中心的联机交易处理系统的第二联机应用装置在所述生产中心的联机交易处理系统发生故障时,对客户提交的交易报文进行处理;
异地备份中心的交易重做应用系统的交易重做应用装置在所述生产中心的联机交易处理系统发生故障时,从第二通讯前置装置中获取故障时间点之前任一时刻的交易报文和已处理的交易报文,将交易报文和已处理的交易报文进行格式转换,获得相应的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储远程异步写入的交易处理结果,第二联机应用装置对客户提交的交易报文进行处理后得到的交易处理结果,交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
8.如权利要求7所述的交易数据处理方法,其特征在于,还包括:
生产中心的联机交易处理系统的第一联机交易数据库存储格式转换后的交易报文和格式转换后的已处理的交易报文;
异地备份中心的交易重做系统的重做交易数据库存储交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果;
异地备份中心的联机交易处理系统的第二联机交易数据库存储从重做交易数据库中获取的交易重做应用装置对故障时间点之前任一时刻的交易报文和已处理的交易报文进行格式转换后获得的交易处理结果。
9.如权利要求7所述的交易数据处理方法,其特征在于,还包括:
生产中心的联机交易处理系统的联机参数数据库存储生产中心的联机交易处理系统的业务参数;
异地备份中心的联机交易处理系统的第二联机应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置;
异地备份中心的交易重做系统的交易重做应用装置从联机参数数据库中获取所述业务参数,根据所述业务参数进行配置。
10.如权利要求9所述的交易数据处理方法,其特征在于,还包括:
异地备份中心的交易重做系统的重做交易参数数据库存储从联机参数数据库中获取的所述业务参数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610569658.3A CN105959169B (zh) | 2016-07-19 | 2016-07-19 | 一种交易数据处理系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610569658.3A CN105959169B (zh) | 2016-07-19 | 2016-07-19 | 一种交易数据处理系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105959169A CN105959169A (zh) | 2016-09-21 |
CN105959169B true CN105959169B (zh) | 2019-09-17 |
Family
ID=56900983
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610569658.3A Active CN105959169B (zh) | 2016-07-19 | 2016-07-19 | 一种交易数据处理系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105959169B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106776837A (zh) * | 2016-11-25 | 2017-05-31 | 国云科技股份有限公司 | 一种基于MongoDB的证券实时交易关联分析的方法 |
CN107220895B (zh) * | 2017-05-31 | 2022-02-22 | 腾讯科技(深圳)有限公司 | 虚拟资源的转移数值统计方法及装置 |
CN109271443A (zh) * | 2018-08-02 | 2019-01-25 | 中国建设银行股份有限公司 | 分布式数据一致性处理方法、系统、装置和存储介质 |
CN110298758B (zh) * | 2019-07-09 | 2021-10-01 | 恒生电子股份有限公司 | 订单申报方法及装置 |
CN111488234B (zh) * | 2020-04-09 | 2021-01-26 | 深圳米筐科技有限公司 | 一种量化交易状态恢复方法 |
CN115311092B (zh) * | 2022-08-22 | 2023-06-27 | 中国国际金融股份有限公司 | 用于资源处理系统的方法、装置,资源处理系统以及计算机可读存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103516667B (zh) * | 2012-06-20 | 2017-03-01 | 中国银联股份有限公司 | 用于安全性信息数据的容灾备份的系统、方法及设备 |
CN102752404B (zh) * | 2012-07-25 | 2015-02-18 | 高旭磊 | 一种新型的灾难备份恢复方法与系统 |
CN103365979A (zh) * | 2013-07-03 | 2013-10-23 | 交通银行股份有限公司 | 一种基于开放数据库的远距离双中心联机处理方法和系统 |
CN104572351B (zh) * | 2014-12-23 | 2017-11-14 | 中国工商银行股份有限公司 | 基于主机系统的数据恢复系统及方法 |
CN104615511B (zh) * | 2015-02-05 | 2018-01-26 | 中国工商银行股份有限公司 | 一种基于双中心的主机批量恢复处理方法及装置 |
CN105763386A (zh) * | 2016-05-13 | 2016-07-13 | 中国工商银行股份有限公司 | 业务处理系统及方法 |
-
2016
- 2016-07-19 CN CN201610569658.3A patent/CN105959169B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN105959169A (zh) | 2016-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105959169B (zh) | 一种交易数据处理系统及方法 | |
CN109901949A (zh) | 双活数据中心的应用灾备系统及方法 | |
CN107480978B (zh) | 基于区块链技术的代付款方法 | |
CN102801543B (zh) | 一种双活系统间动态数据同步的方法 | |
CN107491948B (zh) | 基于区块链技术的转账支付方法 | |
EP1485806B1 (en) | Improvements relating to fault-tolerant computers | |
CN109377365B (zh) | 一种资产转移方法、设备和存储介质 | |
CN110298740A (zh) | 数据对账方法、装置、设备以及存储介质 | |
WO2020088098A1 (zh) | 一种基于区块链的质量数据处理方法和装置 | |
CA2911001C (en) | Failover system and method | |
US10331527B2 (en) | Accelerated recovery after a data disaster | |
CN107798127A (zh) | 一种银行大型主机与个人计算机的数据同步方法及装置 | |
CN106815094B (zh) | 一种用于实现主备同步模式下事务提交的方法与设备 | |
CN106649104A (zh) | 一种基于主机系统交易重放的测试系统及方法 | |
EP4369684A2 (en) | Techniques to provide streaming data resiliency utilizing a distributed message queue system | |
CN105869033A (zh) | 一种检测网络交易系统内部错误的方法及对应的设备系统 | |
CN106021020B (zh) | 一种双活数据站点应用数据挂载方法及装置 | |
CN109002370B (zh) | 在线清结算系统的备份方法及装置、存储介质 | |
CN111242762A (zh) | 金融产品购买方法、装置以及系统 | |
CN111274255B (zh) | 业务数据监控方法及系统、监控架构、设备、存储介质 | |
CN111754348B (zh) | 场景化组合交易方法及装置 | |
JP6480636B2 (ja) | 冗長性のための電気信号の共処理 | |
CN111241143B (zh) | 用于供水的水量和水费的分布式计算方法及系统 | |
CN102929746A (zh) | 一种用于彩票销售系统的快速备份及恢复方法 | |
CN115310981A (zh) | 交易数据处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |