CN116541401A - 一种报表数据处理方法及装置、存储介质、计算机设备 - Google Patents

一种报表数据处理方法及装置、存储介质、计算机设备 Download PDF

Info

Publication number
CN116541401A
CN116541401A CN202310581571.8A CN202310581571A CN116541401A CN 116541401 A CN116541401 A CN 116541401A CN 202310581571 A CN202310581571 A CN 202310581571A CN 116541401 A CN116541401 A CN 116541401A
Authority
CN
China
Prior art keywords
data
target
report
data table
service data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310581571.8A
Other languages
English (en)
Inventor
曹朝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pingan Payment Technology Service Co Ltd
Original Assignee
Pingan Payment Technology Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pingan Payment Technology Service Co Ltd filed Critical Pingan Payment Technology Service Co Ltd
Priority to CN202310581571.8A priority Critical patent/CN116541401A/zh
Publication of CN116541401A publication Critical patent/CN116541401A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2358—Change logging, detection, and notification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/242—Query formulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/275—Synchronous replication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02—Banking, e.g. interest calculation or account maintenance
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Technology Law (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种报表数据处理方法及装置、存储介质、计算机设备，属于数据处理技术领域，适用于金融领域，主要解决现有技术中报表业务代码量大、稳定性差以及维护困难的问题，包括根据报表业务从目标业务数据库中确定目标数据同步链路；基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。

Description

一种报表数据处理方法及装置、存储介质、计算机设备
技术领域
本发明涉及数据处理技术领域，适用于金融领域，特别是涉及一种报表数据处理方法及装置、存储介质、计算机设备。
背景技术
随着金融领域内各项业务的发展，单个业务的执行可能需要依赖多个域的数据，其中，金融报表业务需要依赖多个域的数据生成报表的现象尤为常见，如资产负债表、现金流量表等。
目前，当报表业务依赖多个域的数据生成报表时，需要在各个域的数据库上进行数据抽取，再通过各个域单独的接口进行数据传递。但是，当报表业务的数据需求量变大，或者数据需求范围变广时，就会有大批量的数据通过不同的接口进行交互，不仅增加了应用端的代码量，还降低了应用端报表业务的稳定性，且增加了报表业务的维护难度。
发明内容
有鉴于此，本发明提供一种报表数据处理方法及装置、存储介质、计算机设备，主要目的在于解决现有技术中金融报表业务代码量大、稳定性差以及维护困难的问题。
依据本发明一个方面，提供了一种报表数据处理方法，包括：
根据报表业务从目标业务数据库中确定目标数据同步链路；
基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
进一步的，所述根据报表业务从目标业务数据库中确定目标数据同步链路之前，所述方法还包括：
获取业务数据库中各个数据表的接口信息，生成数据同步链路；
建立所述报表业务与所述数据同步链路之间的对应关系，以使得基于所述对应关系对所述数据同步链路进行查找。
进一步的，所述基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取之前，所述方法还包括：
基于所述目标数据同步链路查询原业务数据表的表结构信息；
在所述报表库中创建与所述表结构信息相同的初始业务数据表；
在所述初始业务数据表与所述原业务数据表之间建立数据表对应关系。
进一步的，所述基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中包括：
基于所述目标数据同步链路在所述目标业务数据库中对所述原业务数据表进行查询操作；
获取所述原业务数据表中各个字段对应的原业务数据信息；
基于所述数据表对应关系确定与所述原业务数据表对应的所述初始业务数据表，并按照所述字段将所述原业务数据信息对应得写入所述初始业务数据表中，得到所述目标业务数据表。
进一步的，所述从所述目标业务数据表中获取报表数据包括：
获取所述目标业务数据表在所述报表库中的标识信息；
基于所述标识信息确定所述目标业务数据表的目标查询路径，并基于所述目标查询路径从所述目标业务数据表中获取报表数据。
进一步的，所述方法还包括：
按照时间间隔获取所述原业务数据表和所述目标业务数据表的所述表结构信息和业务数据信息；
对所述表结构信息和所述业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息；
基于所述表结构差异信息和/或业务数据差异信息对所述目标业务数据表进行一致性调整，以使得所述目标业务数据表与所述原业务数据表相一致。
进一步的，所述方法还包括：
获取所述目标业务数据库的变更日志，所述变更日志包含所述目标业务数据库的变更操作信息；
基于所述变更操作信息对所述目标业务数据表进行更新操作，以使得所述目标业务数据表与所述目标业务数据库进行相同的变更。
依据本发明另一个方面，提供了一种报表数据处理装置，包括：
链路确定模块，用于根据报表业务从目标业务数据库中确定目标数据同步链路；
数据迁移模块，用于基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
数据获取模块，用于从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
进一步的，所述装置还包括链路配置模块，用于：
获取业务数据库中各个数据表的接口信息，生成数据同步链路；
建立所述报表业务与所述数据同步链路之间的对应关系，以使得基于所述对应关系对所述数据同步链路进行查找。
进一步的，所述装置还包括数据表配置模块，用于：
基于所述目标数据同步链路查询原业务数据表的表结构信息；
在所述报表库中创建与所述表结构信息相同的初始业务数据表；
在所述初始业务数据表与所述原业务数据表之间建立数据表对应关系。
进一步的，所述数据迁移模块还用于：
基于所述目标数据同步链路在所述目标业务数据库中对所述原业务数据表进行查询操作；
获取所述原业务数据表中各个字段对应的原业务数据信息；
基于所述数据表对应关系确定与所述原业务数据表对应的所述初始业务数据表，并按照所述字段将所述原业务数据信息对应得写入所述初始业务数据表中，得到所述目标业务数据表。
进一步的，所述数据获取模块还用于：
获取所述目标业务数据表在所述报表库中的标识信息；
基于所述标识信息确定所述目标业务数据表的目标查询路径，并基于所述目标查询路径从所述目标业务数据表中获取报表数据。
进一步的，所述装置还包括比对调整模块，用于：
按照时间间隔获取所述原业务数据表和所述目标业务数据表的所述表结构信息和业务数据信息；
对所述表结构信息和所述业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息；
基于所述表结构差异信息和/或业务数据差异信息对所述目标业务数据表进行一致性调整，以使得所述目标业务数据表与所述原业务数据表相一致。
进一步的，所述装置还包括信息变更模块，用于：
获取所述目标业务数据库的变更日志，所述变更日志包含所述目标业务数据库的变更操作信息；
基于所述变更操作信息对所述目标业务数据表进行更新操作，以使得所述目标业务数据表与所述目标业务数据库进行相同的变更。
依据本发明的又一方面，提供了一种存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如上述报表数据处理方法对应的操作。
依据本发明再一个方面，提供了一种计算机设备，包括处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如上述报表数据处理方法对应的操作。
借由上述技术方案，本发明实施例提供的技术方案至少具有下列优点：
本发明提供了一种报表数据处理方法及装置、存储介质、计算机设备，与现有技术相比，本发明通过根据报表业务从目标业务数据库中确定目标数据同步链路；基于目标数据同步链路从目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在报表库中得到至少一个与目标业务数据库对应的目标业务数据表；从目标业务数据表中获取报表数据，以使得基于报表数据生成报表，实现了仅通过与报表库进行数据交互生成金融报表的功能，不仅能提高金融报表业务的稳定性，降低金融报表业务的维护难度，还提高了金融报表业务的数据响应效率。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明实施例提供的一种报表数据处理方法的流程示意图；
图2示出了本发明实施例提供的另一种报表数据处理方法的流程示意图；
图3示出了本发明实施例提供的又一种报表数据处理方法的流程示意图；
图4示出了本发明实施例提供的再一种报表数据处理方法的流程示意图；
图5示出了本发明实施例提供的再一种报表数据处理方法的流程示意图；
图6示出了本发明实施例提供的一种报表数据处理装置的结构示意图；
图7示出了本发明实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例提供了一种报表数据处理方法，如图1所示，该方法包括：
101、根据报表业务从目标业务数据库中确定目标数据同步链路；
本发明实施例中，当前执行端为执行具体报表业务的执行端，所述报表业务可以是系统后端用于运维的报表业务，还可以是系统前端用于报表展示的报表业务，还可以是系统服务端执行的报表业务等，本发明实施例不做具体限定。在金融领域内，所述报表业务可以包括资产负债报表业务、利润报表业务、现金流报表业务等，本发明实施例不做具体限定。当前执行端根据报表业务从目标业务数据库中确定目标数据同步链路。其中，目标业务数据库用于表征为报表业务提供数据的业务数据库，当报表业务依赖多个域的数据生成报表时，则为报表业务提供数据的业务数据库为多个，如资产负债报表业务1依赖3个域的数据生成报表，则资产负债报表业务1的目标数据库的数量为3；利润报表业务2依赖5个域的数据生成报表，则利润报表业务2的目标数据库的数量为5等，本发明实施例不做具体限定。其中，目标数据同步链路用于表征目标数据库中各个业务数据表的访问路径，该访问路径还用于实时对业务数据表进行数据查询，以便于在当前执行端中实现数据同步。
102、基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
本发明实施例中，当前执行端基于目标数据同步链路从目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中。其中，数据抽取的过程即为从数据库中读取数据的过程，本发明实施例不做具体限定。原业务数据用于表征各项业务执行过程中保存的原始数据，可以是性能类数据、统计类数据、结算类数据等，本发明实施例不做具体限定。其中，报表库用于表征为报表业务提供数据的唯一数据库，在报表库中至少存在一个目标业务数据表，该目标业务数据表从对应的目标业务数据库中将原业务数据迁移进来并进行实时同步，以使得报表业务执行时从目标业务数据表中获取到与原业务数据同步后的迁移业务数据。
需要说明的是，当目标业务数据库中存在多个数据表同时为报表业务提供原业务数据时，在报表库中得到与目标数据库中相同数量的目标业务数据表，并与目标数据库相对应。如，目标业务数据库A中存在5个数据表，分别为数据表1、数据表2、数据表3、数据表4和数据表5，其中数据表1和数据表2同时为报表业务1提供原业务数据，则在报表库中得到与目标业务数据库A对应的目标业务数据表的数量为2，可以命名为目标业务数据表A_1和目标业务数据表A_2。其中，目标业务数据表A_1中的迁移业务数据与目标业务数据库A中数据表1的原业务数据同步，目标业务数据表A_2中的迁移业务数据与目标业务数据库A中数据表2的原业务数据同步，本发明实施例不做具体限定。
103、从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
本发明实施例中，当前执行端从目标业务数据表中获取报表数据，以使得基于报表数据生成报表。由于，报表库中可能存在多个目标业务数据表，因此采用给目标业务数据表添加标识信息的方法对多个目标业务数据表进行区分。其中，标识信息用于表征唯一识别目标业务数据表的信息，可以是数字编码信息、文字信息、符号信息等信息的一种或任意组合，如步骤102中目标业务数据表A_1的标识信息可以为“form_ywA_1”，目标业务数据表A_2的标识信息可以为“form_ywA_2”等，本发明实施例不做具体限定。当前执行端获取目标业务数据表在报表库中的标识信息，基于标识信息确定目标业务数据表的目标查询路径，并基于目标查询路径从目标业务数据表中获取报表数据。如，当前执行端获取步骤102中目标业务数据表A_1在报表库中的标识信息“form_ywA_1”，根据标识信息“form_ywA_1”确定目标业务数据表A_1在报表库中的目标查询路径，从而基于目标查询路径从目标业务数据表A_1中获取到用于生成报表的原业务数据的迁移业务数据，即为保存在报表库中的报表数据。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了便于将原业务数据同步到报表库中，并避免在数据同步时产生偏差，提供了另一种报表数据处理方法，如图2所示，步骤根据报表业务从目标业务数据库中确定目标数据同步链路之前，所述方法还包括：
201、获取业务数据库中各个数据表的接口信息，生成数据同步链路；
202、建立所述报表业务与所述数据同步链路之间的对应关系，以使得基于所述对应关系对所述数据同步链路进行查找。
本发明实施例中，当前执行端获取业务数据库中各个数据表的接口信息，生成数据同步链路。其中，各个数据表的接口信息用于表征从数据表中获取数据的接口，针对每一个接口均生成一条与之对应的数据同步链路。由于各个数据表获取数据的接口不同，则生成与之对应的数据同步链路也不同。当前执行端建立报表业务与数据同步链路之间的对应关系，当报表业务需要从多个数据同步链路对应的数据表中获取业务数据时，则1个报表业务对应多个数据同步链路，具体的对应关系可以参见如下表1。
表1对应关系
如上表1中报表业务与数据同步链路之间的对应关系所示，报表业务A对应的数据同步链路包括链路1和链路2，报表业务B对应的数据同步链路为链路3，报表业务C对应的数据同步链路包括链路4、链路5和链路6等，本发明实施例不做具体限定。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了使迁移业务数据在报表库中与原业务数据具有相同的存储结构，提供了另一种报表数据处理方法，如图3所示，步骤基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取之前，所述方法还包括：
301、基于所述目标数据同步链路查询原业务数据表的表结构信息；
302、在所述报表库中创建与所述表结构信息相同的初始业务数据表；
303、在所述初始业务数据表与所述原业务数据表之间建立数据表对应关系。
本发明实施例中，当前执行端基于目标数据同步链路查询原业务数据表的表结构信息，其中表结构信息用于表征原业务数据在数据表中的存储结构，包括数据表中的字段个数，每个字段的名称、数据类型和长度等信息，本发明实施例不做具体限定。当前执行端在报表库中创建与表结构信息相同的初始业务数据表，即初始业务数据表的字段个数、每个字段的名称、数据类型、长度等信息均与原业务数据表相一致。当前执行端在初始业务数据表与原业务数据表之间建立数据表对应关系，即每一个原业务数据表均具有一个与之对应的且结构相同的初始业务数据表。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了准确且完整得将目标业务数据库中存储的原业务数据迁移至已经创建好的初始业务数据表中，提供了另一种报表数据处理方法，如图4所示，步骤基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中包括：
401、基于所述目标数据同步链路在所述目标业务数据库中对所述原业务数据表进行查询操作；
402、获取所述原业务数据表中各个字段对应的原业务数据信息；
403、基于所述数据表对应关系确定与所述原业务数据表对应的所述初始业务数据表，并按照所述字段将所述原业务数据信息对应得写入所述初始业务数据表中，得到所述目标业务数据表。
本发明实施例中，当前执行端基于目标数据同步链路对原业务数据表进行查询操作，从原业务数据表中按字段顺序获取对应的原业务数据信息。如先获取第一字段中的原业务数据信息，再获取第二字段中的原业务数据信息，以此类推，直到按顺序获取到最后一个字段中的原业务数据信息，本发明实施例不做具体限定。其中，原业务数据信息用于表征原业务数据的内容信息，包括数据内容、数据索引、数据约束等信息，本发明实施例不做具体限定。当前执行端基于数据表对应关系确定与原业务数据表对应的初始业务数据表，并按照字段顺序将原业务数据信息对应得写入初始业务数据表中，即先将原业务数据表中获取的第一字段中的原业务数据信息迁移至初始业务数据表中的第一字段中，再将原业务数据表中获取的第二字段中的原业务数据信息迁移至初始业务数据表中的第二字段中，以此类推，直到按顺序将原业务数据表中获取的最后一个字段中的原业务数据信息迁移至初始业务数据表中，当原业务数据表中全部的原业务数据信息均迁移至初始业务数据表中时，即在报表库中得到与迁移前原业务数据表相一致的目标业务数据表。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了及时得对报表库中的目标业务数据表进行比对调整，使得调整后的目标业务数据表在结构和内容上均与原业务数据表相一致，提供了另一种报表数据处理方法，如图5所示，所述方法还包括：
501、按照时间间隔获取所述原业务数据表和所述目标业务数据表的所述表结构信息和业务数据信息；
502、对所述表结构信息和所述业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息；
503、基于所述表结构差异信息和/或业务数据差异信息对所述目标业务数据表进行一致性调整，以使得所述目标业务数据表与所述原业务数据表相一致。
本发明实施例中，当前执行端按照时间间隔获取原业务数据表和目标业务数据表的表结构信息和业务数据信息。其中，时间间隔用于表征对所述目标业务数据表进行比对调整的周期，如5秒、30秒、2分钟、0.5小时等，本发明实施例不做具体限定。其中，表结构信息用于表征原业务数据在数据表中的存储结构，包括数据表中的字段个数，每个字段的名称、数据类型和长度等信息，本发明实施例不做具体限定。其中，业务数据信息用于表征业务数据的内容信息，包括数据内容、数据索引、数据约束等信息，本发明实施例不做具体限定。当前执行端对表结构信息和业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息，其中，表结构差异信息用于表征目标业务数据表与原业务数据表在结构上的差异，如字段个数的差异等；业务数据差异信息用于表征目标业务数据表与原业务数据表在内容上的差异，如缺少数据、缺少数据索引等，本发明实施例不做具体限定。当前执行端基于表结构差异信息和/或业务数据差异信息对目标业务数据表进行一致性调整，即当缺少字段时，将缺少的字段补充到相应的位置；当缺少数据时，将缺少的数据补充到对应字段中相应的数据位置；当缺少数据索引时，将缺少的数据索引添加到相应的数据上等，本发明实施例不做具体限定。经一致性调整后，得到的目标业务数据表与对应的原业务数据表在结构和内容上均保持一致。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了根据目标业务数据库的动态信息对目标业务数据表进行及时得变更，提供了另一种报表数据处理方法，所述方法还包括：
获取所述目标业务数据库的变更日志；
基于所述变更操作信息对所述目标业务数据表进行更新操作，以使得所述目标业务数据表与所述目标业务数据库进行相同的变更。
本发明实施例中，当前执行端获取目标业务数据库的变更日志，所述变更日志包含所述目标业务数据库的变更操作信息。其中变更日志用于记录用户对目标业务数据库的所有变更操作信息，包括新增操作信息、删除操作信息、修改操作信息等，本发明实施例不做具体限定。当前执行端从所有变更操作信息中获取与目标业务数据表相关的变更操作信息，并对目标业务数据表进行同样的变更操作，实现对目标业务数据表的更新，使得更新后的目标业务数据表与目标数据库中原业务数据表进行相同的变更。如，目标业务数据库的变更日志中包含对原业务数据表A的字段新增操作，对原业务数据表B的索引修改操作等；则基于数据表对应关系，对与原业务数据表A相对应的目标业务数据表A进行字段新增操作，对与原业务数据表B相对应的目标业务数据表B进行索引修改操作等，本发明实施例不做具体限定。
本发明实施例提供了一种报表数据处理方法，与现有技术相比，本发明通过根据报表业务从目标业务数据库中确定目标数据同步链路；基于目标数据同步链路从目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在报表库中得到至少一个与目标业务数据库对应的目标业务数据表；从目标业务数据表中获取报表数据，以使得基于报表数据生成报表，实现了仅通过与报表库进行数据交互生成报表的功能，不仅能提高报表业务的稳定性，降低报表业务的维护难度，还提高了报表业务的数据响应效率。
作为对上述图1所示方法的实现，本发明实施例提供了一种报表数据处理装置，如图6所示，所述装置包括：
链路确定模块61，用于根据报表业务从目标业务数据库中确定目标数据同步链路；
数据迁移模块62，用于基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
数据获取模块63，用于从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
进一步的，所述装置还包括链路配置模块，用于：
获取业务数据库中各个数据表的接口信息，生成数据同步链路；
建立所述报表业务与所述数据同步链路之间的对应关系，以使得基于所述对应关系对所述数据同步链路进行查找。
进一步的，所述装置还包括数据表配置模块，用于：
基于所述目标数据同步链路查询原业务数据表的表结构信息；
在所述报表库中创建与所述表结构信息相同的初始业务数据表；
在所述初始业务数据表与所述原业务数据表之间建立数据表对应关系。
进一步的，所述数据迁移模块62还用于：
基于所述目标数据同步链路在所述目标业务数据库中对所述原业务数据表进行查询操作；
获取所述原业务数据表中各个字段对应的原业务数据信息；
基于所述数据表对应关系确定与所述原业务数据表对应的所述初始业务数据表，并按照所述字段将所述原业务数据信息对应得写入所述初始业务数据表中，得到所述目标业务数据表。
进一步的，所述数据获取模块63还用于：
获取所述目标业务数据表在所述报表库中的标识信息；
基于所述标识信息确定所述目标业务数据表的目标查询路径，并基于所述目标查询路径从所述目标业务数据表中获取报表数据。
进一步的，所述装置还包括比对调整模块，用于：
按照时间间隔获取所述原业务数据表和所述目标业务数据表的所述表结构信息和业务数据信息；
对所述表结构信息和所述业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息；
基于所述表结构差异信息和/或业务数据差异信息对所述目标业务数据表进行一致性调整，以使得所述目标业务数据表与所述原业务数据表相一致。
进一步的，所述装置还包括信息变更模块，用于：
获取所述目标业务数据库的变更日志，所述变更日志包含所述目标业务数据库的变更操作信息；
基于所述变更操作信息对所述目标业务数据表进行更新操作，以使得所述目标业务数据表与所述目标业务数据库进行相同的变更。
本发明实施例提供了一种报表数据处理装置，与现有技术相比，本发明通过根据报表业务从目标业务数据库中确定目标数据同步链路；基于目标数据同步链路从目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在报表库中得到至少一个与目标业务数据库对应的目标业务数据表；从目标业务数据表中获取报表数据，以使得基于报表数据生成报表，实现了仅通过与报表库进行数据交互生成金融报表的功能，不仅能提高金融报表业务的稳定性，降低金融报表业务的维护难度，还提高了金融报表业务的数据响应效率。
根据本发明一个实施例提供了一种存储介质，所述存储介质存储有至少一可执行指令，该计算机可执行指令可执行上述任意方法实施例中报表数据处理方法。
图7示出了根据本发明一个实施例提供的一种计算机设备的结构示意图，本发明具体实施例并不对计算机设备的具体实现做限定。
如图7所示，该计算机设备可以包括：处理器(processor)702、通信接口(Communications Interface)704、存储器(memory)706、以及通信总线708。
其中：处理器702、通信接口704、以及存储器706通过通信总线708完成相互间的通信。
通信接口704，用于与其它设备比如客户端或其它服务器等的网元通信。
处理器702，用于执行程序710，具体可以执行上述报表数据处理方法实施例中的相关步骤。
具体地，程序710可以包括程序代码，该程序代码包括计算机操作指令。
处理器702可能是中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。计算机设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储器706，用于存放程序710。存储器706可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序710具体可以用于使得处理器702执行以下操作：
根据报表业务从目标业务数据库中确定目标数据同步链路；
基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包括在本发明的保护范围之内。

Claims (10)

1.一种报表数据处理方法，其特征在于，包括：
根据报表业务从目标业务数据库中确定目标数据同步链路；
基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
2.根据权利要求1所述的方法，其特征在于，所述根据报表业务从目标业务数据库中确定目标数据同步链路之前，所述方法还包括：
获取业务数据库中各个数据表的接口信息，生成数据同步链路；
建立所述报表业务与所述数据同步链路之间的对应关系，以使得基于所述对应关系对所述数据同步链路进行查找。
3.根据权利要求1所述的方法，其特征在于，所述基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取之前，所述方法还包括：
基于所述目标数据同步链路查询原业务数据表的表结构信息；
在所述报表库中创建与所述表结构信息相同的初始业务数据表；
在所述初始业务数据表与所述原业务数据表之间建立数据表对应关系。
4.根据权利要求3所述的方法，其特征在于，所述基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中包括：
基于所述目标数据同步链路在所述目标业务数据库中对所述原业务数据表进行查询操作；
获取所述原业务数据表中各个字段对应的原业务数据信息；
基于所述数据表对应关系确定与所述原业务数据表对应的所述初始业务数据表，并按照所述字段将所述原业务数据信息对应得写入所述初始业务数据表中，得到所述目标业务数据表。
5.根据权利要求1所述的方法，其特征在于，所述从所述目标业务数据表中获取报表数据包括：
获取所述目标业务数据表在所述报表库中的标识信息；
基于所述标识信息确定所述目标业务数据表的目标查询路径，并基于所述目标查询路径从所述目标业务数据表中获取报表数据。
6.根据权利要求4所述的方法，其特征在于，所述方法还包括：
按照时间间隔获取所述原业务数据表和所述目标业务数据表的所述表结构信息和业务数据信息；
对所述表结构信息和所述业务数据信息进行一致性比对，得到表结构差异信息和/或业务数据差异信息；
基于所述表结构差异信息和/或业务数据差异信息对所述目标业务数据表进行一致性调整，以使得所述目标业务数据表与所述原业务数据表相一致。
7.根据权利要求1～6中任一项所述的方法，其特征在于，所述方法还包括：
获取所述目标业务数据库的变更日志，所述变更日志包含所述目标业务数据库的变更操作信息；
基于所述变更操作信息对所述目标业务数据表进行更新操作，以使得所述目标业务数据表与所述目标业务数据库进行相同的变更。
8.一种报表数据处理装置，其特征在于，包括：
链路确定模块，用于根据报表业务从目标业务数据库中确定目标数据同步链路；
数据迁移模块，用于基于所述目标数据同步链路从所述目标业务数据库中进行数据抽取，将抽取的原业务数据对应得写入报表库中，在所述报表库中得到至少一个与所述目标业务数据库对应的目标业务数据表；
数据获取模块，用于从所述目标业务数据表中获取报表数据，以使得基于所述报表数据生成报表。
9.一种存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令执行如权利要求1-7中任一项所述的报表数据处理方法对应的操作。
10.一种计算机设备，包括处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-7中任一项所述的报表数据处理方法对应的操作。
CN202310581571.8A 2023-05-22 2023-05-22 一种报表数据处理方法及装置、存储介质、计算机设备 Pending CN116541401A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310581571.8A CN116541401A (zh) 2023-05-22 2023-05-22 一种报表数据处理方法及装置、存储介质、计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310581571.8A CN116541401A (zh) 2023-05-22 2023-05-22 一种报表数据处理方法及装置、存储介质、计算机设备

Publications (1)

Publication Number Publication Date
CN116541401A true CN116541401A (zh) 2023-08-04

Family

ID=87446863

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310581571.8A Pending CN116541401A (zh) 2023-05-22 2023-05-22 一种报表数据处理方法及装置、存储介质、计算机设备

Country Status (1)

Country Link
CN (1) CN116541401A (zh)

Similar Documents

Publication Publication Date Title
CN107977396B (zh) 一种KeyValue数据库的数据表的更新方法与表数据更新装置
CN108647357B (zh) 数据查询的方法及装置
CN106934048A (zh) 数据在线迁移方法、代理节点
CN107958010A (zh) 用于在线数据迁移的方法及系统
CN112559475B (zh) 数据实时捕获和传输方法及系统
CN110858172A (zh) 一种自动化测试代码生成方法和装置
CN106547646B (zh) 一种数据备份及恢复方法、数据备份及恢复装置
CN111651519A (zh) 数据同步方法、数据同步装置、电子设备及存储介质
CN104317957A (zh) 一种报表处理的开放平台、系统及报表处理方法
CN113076304A (zh) 一种分布式版本管理方法、装置和系统
CN113468226A (zh) 一种业务处理方法、装置、电子设备和存储介质
CN114329096A (zh) 一种原生图数据库处理方法及系统
CN111339743B (zh) 一种账号生成的方法和装置
CN114416868B (zh) 一种数据同步方法、装置、设备及存储介质
CN111753015A (zh) 支付清算系统的数据查询方法及装置
CN110196680B (zh) 数据处理方法、装置及存储介质
CN111124883B (zh) 一种基于树形表格的测试用例库引入方法、系统及设备
CN115033578A (zh) 一种业务数据更新的方法、相关装置及存储介质
CN111966650B (zh) 一种运维大数据共享数据表的处理方法、装置及存储介质
CN116541401A (zh) 一种报表数据处理方法及装置、存储介质、计算机设备
Goncalves et al. DottedDB: Anti-entropy without merkle trees, deletes without tombstones
CN111563123B (zh) 一种hive仓库元数据实时同步方法
CN116107801A (zh) 交易处理方法及相关产品
US10402391B2 (en) Processing method, device and system for data of distributed storage system
CN112328683A (zh) 一种支持数据库与库直接的数据传输方法、系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination