CN105760485A - 财务数据抽取方法及系统 - Google Patents

财务数据抽取方法及系统 Download PDF

Info

Publication number
CN105760485A
CN105760485A CN201610089220.5A CN201610089220A CN105760485A CN 105760485 A CN105760485 A CN 105760485A CN 201610089220 A CN201610089220 A CN 201610089220A CN 105760485 A CN105760485 A CN 105760485A
Authority
CN
China
Prior art keywords
financial data
financial
database
source database
source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610089220.5A
Other languages
English (en)
Inventor
王春晓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Ctrip Business Co Ltd
Original Assignee
Shanghai Ctrip Business Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Ctrip Business Co Ltd filed Critical Shanghai Ctrip Business Co Ltd
Priority to CN201610089220.5A priority Critical patent/CN105760485A/zh
Publication of CN105760485A publication Critical patent/CN105760485A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G06F11/1461—Backup scheduling policy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G06F11/1464—Management of the backup or restore process for networked environments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种财务数据抽取方法及系统，其基于多个源数据库实现，每一源数据库存储有多个数据，每一数据包括订单号、订单状态、金额信息以及时间戳，方法包括：S1、基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；S2、将从每一源数据库中选出的所需的财务数据抽取至一财务服务器的目标数据库中；S3、判断所有选出的所需的财务数据是否均已抽取完成，若为是则结束流程。本发明采用按需和增量的方式抽取财务数据，减少了大量无用数据的抽取，极大地缩短了财务数据抽取的时长。

Description

财务数据抽取方法及系统
技术领域
本发明涉及财务数据处理领域，特别涉及一种财务数据抽取方法和财务数据抽取系统。
背景技术
当前，在每日凌晨后将数个源数据库中的数据抽取到财务服务器，现有的抽取方式是将该些源数据库中的所有数据全部备份并还原到财务服务器中。随着订单量的增加，源数据库中的数据越来越多，这种抽取方式导致抽取数据的总时长急剧增加，不利用后续流程的处理。
发明内容
本发明要解决的技术问题是为了克服现有技术中的抽取方式导致抽取数据的总时长急剧增加，不利用后续流程的处理的缺陷，提供一种财务数据抽取方法及系统。
本发明是通过下述技术方案来解决上述技术问题的：
本发明提供一种财务数据抽取方法，其基于多个源数据库实现，每一源数据库存储有多个数据，每一数据包括订单号、订单状态、金额信息以及时间戳，其特点在于，该财务数据抽取方法包括以下步骤：
S1、基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
S2、将从每一源数据库中选出的所需的财务数据抽取至一财务服务器的目标数据库中；
S3、判断所有选出的所需的财务数据是否均已抽取完成，若为是则结束流程。
较佳地，在步骤S3之后包括步骤S4、发送一抽取完成信息至该财务报表系统。
较佳地，该财务服务器包括多个目标数据库，每一目标数据库唯一对应一个源数据库；
在步骤S2中，将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
在步骤S3中，判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则执行步骤S4发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
较佳地，同步地将每一源数据库选出的所需的财务数据抽取至每一源数据库对应的目标数据库中。
较佳地，每一目标数据库中存储有若干目标表，每一源数据库中存储有多个源表，每一目标表均唯一对应一个源表；
在步骤S2中，将从每一源数据库中选出的所需的财务数据插入至该源数据库对应的目标数据库中该选出的所需的财务数据所在的源表对应的目标表。
本发明还提供一种财务数据抽取系统，其基于多个源数据库实现，每一源数据库存储有多个数据，每一数据包括订单号、订单状态、金额信息以及时间戳，其特点在于，该财务数据抽取系统包括：
一选取模块，用于基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
一抽取模块，用于将从每一源数据库中选出的所需的财务数据抽取至一财务服务器的目标数据库中；
一判断模块，用于判断所有选出的所需的财务数据是否均已抽取完成，若为是则结束。
较佳地，该财务数据抽取系统还包括一发送模块，该发送模块用于发送一抽取完成信息至该财务报表系统。
较佳地，该财务服务器包括多个目标数据库，每一目标数据库唯一对应一个源数据库；
该抽取模块用于将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
该判断模块用于判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则调用该发送模块发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
较佳地，该抽取模块用于同步地将每一源数据库选出的所需的财务数据抽取至每一源数据库对应的目标数据库中。
较佳地，每一目标数据库中存储有若干目标表，每一源数据库中存储有多个源表，每一目标表均唯一对应一个源表；
该抽取模块用于将从每一源数据库中选出的所需的财务数据插入至该源数据库对应的目标数据库中该选出的所需的财务数据所在的源表对应的目标表。
在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本发明各较佳实例。
本发明的积极进步效果在于：
本发明采用按需和增量的方式抽取财务数据，减少了大量无用数据的抽取，极大地缩短了财务数据抽取的时长。
附图说明
图1为本发明较佳实施例的财务数据抽取方法的流程图。
图2为本发明较佳实施例的财务数据抽取系统的结构框图。
图3为本发明较佳实施例的财务数据抽取过程的示意图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。
本实施例提供一种财务数据抽取方法，其基于多个源数据库和一财务服务器实现，每一源数据库存储有多个数据表，数据包括订单号、订单状态、金额信息、时间戳、预定时间以及扩展信息(例如用户身份信息)等。该财务服务器包括多个目标数据库，每一目标数据库唯一对应一个源数据库。
如图1所示，该财务数据抽取方法包括以下步骤：
步骤101、基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
步骤102、同步地将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
步骤103、判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则执行步骤104，若为否则继续执行步骤103；
步骤104、发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
优选地，每一目标数据库中存储有若干目标表，每一源数据库中存储有多个源表，每一目标表均唯一对应一个源表；
在步骤102中，将从每一源数据库中选出的所需的财务数据插入至该源数据库对应的目标数据库中该选出的所需的财务数据所在的源表对应的目标表。
如图2所示，本实施例还提供一种财务数据抽取系统，其基于多个源数据库实现，每一源数据库存储有多个数据表，数据包括订单号、订单状态、金额信息以及时间戳，该财务数据备份系统包括：
一选取模块1，用于基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
一备份模块2，同步地将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
一判断模块3，用于判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则调用一发送模块4，若否则继续调用该判断模块3；
该发送模块4用于发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
为了使本领域的技术人员能够更好地理解本实施例，下面举一具体的例子来说明：
如图3所示，设定源数据库的数量为10个，标记为SDB1-SDB10，目标数据库的数量也为10个，标记为MDB1-MDB10，源数据库与目标数据库一一对应。
基于一财务报表系统所需的财务数据，从源数据库SDB1-SDB10中分别选取时间戳在2016.1.26凌晨-2016.1.27凌晨这一时间段内的所需的财务数据，每一源数据库中选取出的所需的财务数据相对于该时间段之前均为增量数据，然后，分别将从源数据库SDB1-SDB10中选出的增量数据同步抽取至相应的目标数据库MDB1-MDB10中，即将源数据库SDB1中选取的增量数据插入合并至目标数据库MDB1中，其他以此类推。
其后，判断每一个源数据库中选出的所需的财务数据是否均已抽取完成，假设判断出源数据库SDB1中选出的所需的财务数据已经全部插入合并至目标数据库MDB1中，则发送一源数据库SDB1对应的目标数据库MDB1抽取完成的信息至该财务报表系统，其他以此类推。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这些仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。

Claims (10)

1.一种财务数据抽取方法，其基于多个源数据库实现，每一源数据库存储有多个数据，每一数据包括订单号、订单状态、金额信息以及时间戳，其特征在于，该财务数据抽取方法包括以下步骤：
S1、基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
S2、将从每一源数据库中选出的所需的财务数据抽取至一财务服务器的目标数据库中；
S3、判断所有选出的所需的财务数据是否均已抽取完成，若为是则结束流程。
2.如权利要求1所述的财务数据抽取方法，其特征在于，在步骤S3之后包括步骤S4、发送一抽取完成信息至该财务报表系统。
3.如权利要求2所述的财务数据抽取方法，其特征在于，该财务服务器包括多个目标数据库，每一目标数据库唯一对应一个源数据库；
在步骤S2中，将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
在步骤S3中，判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则执行步骤S4发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
4.如权利要求3所述的财务数据抽取方法，其特征在于，同步地将每一源数据库选出的所需的财务数据抽取至每一源数据库对应的目标数据库中。
5.如权利要求3所述的财务数据抽取方法，其特征在于，每一目标数据库中存储有若干目标表，每一源数据库中存储有多个源表，每一目标表均唯一对应一个源表；
在步骤S2中，将从每一源数据库中选出的所需的财务数据插入至该源数据库对应的目标数据库中该选出的所需的财务数据所在的源表对应的目标表。
6.一种财务数据抽取系统，其基于多个源数据库实现，每一源数据库存储有多个数据，每一数据包括订单号、订单状态、金额信息以及时间戳，其特征在于，该财务数据抽取系统包括：
一选取模块，用于基于一财务报表系统所需的财务数据，从每一源数据库中选取时间戳在一设定时间段内的所需的财务数据，该所需的财务数据包括订单号、订单状态和金额信息；
一抽取模块，用于将从每一源数据库中选出的所需的财务数据抽取至一财务服务器的目标数据库中；
一判断模块，用于判断所有选出的所需的财务数据是否均已抽取完成，若为是则结束。
7.如权利要求6所述的财务数据抽取系统，其特征在于，该财务数据抽取系统还包括一发送模块，该发送模块用于发送一抽取完成信息至该财务报表系统。
8.如权利要求7所述的财务数据抽取系统，其特征在于，该财务服务器包括多个目标数据库，每一目标数据库唯一对应一个源数据库；
该抽取模块用于将从每一源数据库中选出的所需的财务数据抽取至该源数据库对应的目标数据库中；
该判断模块用于判断该源数据库中选出的所需的财务数据是否均已抽取完成，若为是则调用该发送模块发送一该源数据库对应的目标数据库抽取完成的信息至该财务报表系统。
9.如权利要求8所述的财务数据抽取系统，其特征在于，该抽取模块用于同步地将每一源数据库选出的所需的财务数据抽取至每一源数据库对应的目标数据库中。
10.如权利要求8所述的财务数据抽取系统，其特征在于，每一目标数据库中存储有若干目标表，每一源数据库中存储有多个源表，每一目标表均唯一对应一个源表；
该抽取模块用于将从每一源数据库中选出的所需的财务数据插入至该源数据库对应的目标数据库中该选出的所需的财务数据所在的源表对应的目标表。
CN201610089220.5A 2016-02-17 2016-02-17 财务数据抽取方法及系统 Pending CN105760485A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610089220.5A CN105760485A (zh) 2016-02-17 2016-02-17 财务数据抽取方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610089220.5A CN105760485A (zh) 2016-02-17 2016-02-17 财务数据抽取方法及系统

Publications (1)

Publication Number Publication Date
CN105760485A true CN105760485A (zh) 2016-07-13

Family

ID=56330844

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610089220.5A Pending CN105760485A (zh) 2016-02-17 2016-02-17 财务数据抽取方法及系统

Country Status (1)

Country Link
CN (1) CN105760485A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106980636A (zh) * 2016-07-22 2017-07-25 平安科技（深圳）有限公司 保单数据处理方法和装置
CN107301593A (zh) * 2017-06-19 2017-10-27 安徽爱普科技有限公司 一种财务信息系统
CN107644041A (zh) * 2016-07-22 2018-01-30 平安科技（深圳）有限公司 保单结算处理方法和装置
CN109086320A (zh) * 2018-07-02 2018-12-25 平安科技（深圳）有限公司 财务数据同步方法、装置、计算机设备和存储介质
WO2019056789A1 (zh) * 2017-09-25 2019-03-28 平安科技（深圳）有限公司 关联交易的识别方法、装置、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102004744A (zh) * 2009-09-02 2011-04-06 中国银联股份有限公司 从一个源表到至少一个目标库的表的数据抽取系统及方法
CN102521225A (zh) * 2011-09-29 2012-06-27 用友软件股份有限公司 增量数据抽取装置和增量数据抽取方法
CN102663020A (zh) * 2012-03-21 2012-09-12 北京英孚斯迈特信息技术有限公司 一种cdc数据分发方法和装置
CN103914526A (zh) * 2014-03-27 2014-07-09 神华集团有限责任公司 一种用于sap erp系统与oracle erp系统的接口方法和装置
US20140244654A1 (en) * 2013-02-28 2014-08-28 International Business Machines Corporation Data migration
CN104361133A (zh) * 2014-12-10 2015-02-18 用友软件股份有限公司 数据抽取装置和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102004744A (zh) * 2009-09-02 2011-04-06 中国银联股份有限公司 从一个源表到至少一个目标库的表的数据抽取系统及方法
CN102521225A (zh) * 2011-09-29 2012-06-27 用友软件股份有限公司 增量数据抽取装置和增量数据抽取方法
CN102663020A (zh) * 2012-03-21 2012-09-12 北京英孚斯迈特信息技术有限公司 一种cdc数据分发方法和装置
US20140244654A1 (en) * 2013-02-28 2014-08-28 International Business Machines Corporation Data migration
CN103914526A (zh) * 2014-03-27 2014-07-09 神华集团有限责任公司 一种用于sap erp系统与oracle erp系统的接口方法和装置
CN104361133A (zh) * 2014-12-10 2015-02-18 用友软件股份有限公司 数据抽取装置和方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106980636A (zh) * 2016-07-22 2017-07-25 平安科技（深圳）有限公司 保单数据处理方法和装置
WO2018014582A1 (zh) * 2016-07-22 2018-01-25 平安科技（深圳）有限公司 保单数据处理方法、装置、服务器和存储介质
CN107644041A (zh) * 2016-07-22 2018-01-30 平安科技（深圳）有限公司 保单结算处理方法和装置
CN106980636B (zh) * 2016-07-22 2020-04-03 平安科技（深圳）有限公司 保单数据处理方法和装置
CN107644041B (zh) * 2016-07-22 2020-09-01 平安科技（深圳）有限公司 保单结算处理方法和装置
CN107301593A (zh) * 2017-06-19 2017-10-27 安徽爱普科技有限公司 一种财务信息系统
WO2019056789A1 (zh) * 2017-09-25 2019-03-28 平安科技（深圳）有限公司 关联交易的识别方法、装置、计算机设备和存储介质
CN109086320A (zh) * 2018-07-02 2018-12-25 平安科技（深圳）有限公司 财务数据同步方法、装置、计算机设备和存储介质

Similar Documents

Publication Publication Date Title
CN105760485A (zh) 财务数据抽取方法及系统
CN108536752B (zh) 一种数据同步方法、装置和设备
CN103699580B (zh) 数据库同步方法及装置
CN103678494A (zh) 客户端同步服务端数据的方法及装置
US9619512B2 (en) Memory searching system and method, real-time searching system and method, and computer storage medium
CN110879813A (zh) 一种基于二进制日志解析的MySQL数据库增量同步实现方法
US20130073516A1 (en) Extracting Incremental Data
CN110321383A (zh) 大数据平台数据同步方法、装置、计算机设备及存储介质
CN104899295B (zh) 一种异构数据源数据关联分析方法
CN102360410B (zh) 一种文件系统的用户操作发现方法和装置
CN106503158A (zh) 数据同步方法及装置
CN107977396B (zh) 一种KeyValue数据库的数据表的更新方法与表数据更新装置
CN105975502A (zh) 一种基于cdc方式实现增量抽取数据的方法
CN105843784A (zh) 一种报表生成方法及装置
CN106294769B (zh) 同步工程数据的方法、系统和装置
CN105653653A (zh) 一种订单数据同步方法及系统
CN102467525A (zh) 单据关联方法及系统
CN101882135A (zh) 一种数据处理方法和装置
CN105488471B (zh) 一种字形识别方法及装置
CN101676908A (zh) 检测数据库对象完整性的方法及装置
US20090132607A1 (en) Techniques for log file processing
CN105338107A (zh) 一种据点运营同步管理系统及方法
CN115129712A (zh) 基于Oracle数据库的分区快速创建方法及系统
CN104778252A (zh) 索引的存储方法和装置
CN105426481A (zh) 处理数据的方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160713