CN116645182A - 一种银行业务系统及其数据采集方法、服务器及介质 - Google Patents
一种银行业务系统及其数据采集方法、服务器及介质 Download PDFInfo
- Publication number
- CN116645182A CN116645182A CN202310614276.8A CN202310614276A CN116645182A CN 116645182 A CN116645182 A CN 116645182A CN 202310614276 A CN202310614276 A CN 202310614276A CN 116645182 A CN116645182 A CN 116645182A
- Authority
- CN
- China
- Prior art keywords
- file
- content
- reading position
- data
- file content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000005540 biological transmission Effects 0.000 claims abstract description 24
- 238000013480 data collection Methods 0.000 claims description 17
- 238000012546 transfer Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 8
- 238000012544 monitoring process Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 3
- 238000013475 authorization Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/02—Banking, e.g. interest calculation or account maintenance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供一种银行业务系统及其数据采集方法、服务器及介质,可用于大数据领域。该方法包括:从业务系统的数据库获取携带文件标识的文件;查找携带文件标识的文件对应的读取位置记录和访问时间记录,并根据读取位置记录和访问时间记录,获取文件中待采集的文件内容,记录待采集的文件内容对应的读取位置和访问时间;根据数据接收系统的类型选取数据发送模式,将待采集的文件内容发送给数据接收系统。本申请的方法实现了基于开源软件实时采集无法应用X86平台的小型机产生的数据,解决了现有技术中,对于无法应用X86平台的小型机,不能够使用开源软件对其进行监控处理的问题。
Description
技术领域
本申请涉及大数据领域,尤其涉及一种银行业务系统及其数据采集方法、服务器及介质。
背景技术
对部署在小型机上的应用的运行情况进行监控,监控内容具体包括小型机中交易量数据、响应时间数据以及成功率数据。
现有技术中,基于X86平台,使用开源软件对小型机进行监控,但对于无法应用X86平台的小型机,则不能够使用开源软件进行监控处理,即无法获取小型机的交易量数据、响应时间数据以及成功率数据。
发明内容
本申请提供一种银行业务系统及其数据采集方法、服务器及介质,用以解决现有技术中对于无法应用X86平台的小型机,不能够使用开源软件对其进行监控处理的问题。
第一方面,本申请提供一种银行业务系统的数据采集方法,包括:
根据待采集数据的文件标识,从业务系统的数据库获取携带所述文件标识的文件;
查找所述携带所述文件标识的文件对应的读取位置记录和访问时间记录,并根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容;所述读取位置记录为上一次数据采集操作对所述文件的文件内容的读取位置;所述访问时间记录为所述上一次数据采集操作对所述文件的文件内容的访问时间。
记录所述待采集的文件内容对应的读取位置和访问时间。
根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统。
在一种具体实施方式中,所述根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容,包括:
查找所述携带所述文件标识的文件的读取位置记录。
若存在所述携带所述文件标识的文件的读取位置记录,则根据所述访问时间记录和所述文件中各文件内容的时间戳判断所述携带所述文件标识的文件是否存在新增的文件内容,所述时间戳为所述文件内容生成时间。
若所述存在新增的文件内容,则将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。
在一种具体实施方式中,所述将时间戳在所述上次访问时间之后的新增文件内容确定为所述未采集的文件内容,包括:
根据所述时间戳,对时间戳在所述上次访问时间之后的新增文件内容按照时间进行排序。
根据所述读取位置记录确定本次数据采集的初始文件内容。
将所述初始文件内容,与所述初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到所述未采集的文件内容。
在一种具体实施方式中,还包括:
若不存新增文件内容,则将时间戳在所述上次访问时间对应的文件中新增内容确定为所述未采集的文件内容。
在一种具体实施方式中,还包括:
若所述文件不存在所述读取位置记录,则将初始文件至时间戳在本次数据采集时间内的所有文件确定为所述未采集的文件内容。
在一种具体实施方式中,所述根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统,包括:
若所述数据接收系统为批量系统,则压缩处理所述文件内容,并根据文件传输协议FTP进行发送处理。
或者,若所述数据接收系统为联机总线系统,则通过批量发送消息的方式对所述文件内容进行发送处理。
第二方面,本申请提供一种银行业务系统,包括:
获取模块,用于根据待采集数据的文件标识,从业务系统的数据库获取携带所述文件标识的文件。
所述获取模块,还用于查找所述携带所述文件标识的文件对应的读取位置记录和访问时间记录,并根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容;所述读取位置记录为上一次数据采集操作对所述文件的文件内容的读取位置;所述访问时间记录为所述上一次数据采集操作对所述文件的文件内容的访问时间。
记录模块,用于记录所述待采集的文件内容对应的读取位置和访问时间。
发送模块,用于根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统。
在一种具体实施方式中,所述获取模块具体用于:
查找所述携带所述文件标识的文件的读取位置记录。
若存在所述携带所述文件标识的文件的读取位置记录,则根据所述访问时间记录和所述文件中各文件内容的时间戳判断所述携带所述文件标识的文件是否存在新增的文件内容,所述时间戳为所述文件内容生成时间。
若所述存在新增的文件内容,则将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。
在一种具体实施方式中,所述获取模块具体用于:
根据所述时间戳,对时间戳在所述上次访问时间之后的新增文件内容按照时间进行排序。
根据所述读取位置记录确定本次数据采集的初始文件内容。
将所述初始文件内容,与所述初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到所述未采集的文件内容。
在一种具体实施方式中,所述获取模块还用于:
若不存新增文件内容,则将时间戳在所述上次访问时间对应的文件中新增内容确定为所述未采集的文件内容。
在一种具体实施方式中,所述获取模块还用于:
若所述文件不存在所述读取位置记录,则将初始文件至时间戳在本次数据采集时间内的所有文件确定为所述未采集的文件内容。
在一种具体实施方式中,所述发送模块具体用于:
若所述数据接收系统为批量系统,则压缩处理所述文件内容,并根据文件传输协议FTP进行发送处理。
或者,若所述数据接收系统为联机总线系统,则通过批量发送消息的方式对所述文件内容进行发送处理。
第三方面,本申请提供一种服务器,包括:
处理器,存储器,通信接口。
所述存储器用于存储所述处理器可执行的可执行指令。
其中,所述处理器配置为经由执行所述可执行指令来执行如第一方面所述的银行业务系统的数据采集方法。
第四方面,本申请提供一种可读存储介质,其上存储有计算机程序,在于,所述计算机程序被处理器执行时实现第一方面所述的银行业务系统的数据采集方法。
第五方面,本申请提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时用于实现第一方面所述的银行业务系统的数据采集方法。
本申请提供的一种银行业务系统及其数据采集方法、服务器及介质,通过在业务系统的数据库获取携带所述文件标识的文件,查找所述携带所述文件标识的文件对应的读取位置记录和访问时间记录,并根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容,同时对待采集的文件内容对应的读取位置和访问时间进行记录,再根据数据接收系统的类型选取数据发送模式并将待采集的文件内容发送给数据接收系统,实现对无法应用X86平台的小型机的监控处理。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1为本申请提供的一种银行业务系统的数据采集方法实施例一的流程示意图;
图2为本申请提供的一种银行业务系统的数据采集方法实施例二的流程示意图;
图3为本申请提供的一种银行业务系统实施例的结构示意图;
图4为本申请提供的一种服务器的结构示意图。
通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
需要说明的是,本申请一种银行业务系统及其数据采集方法、服务器及介质可用于大数据领域领域,也可用于除大数据领域领域之外的任意领域,本申请一种银行业务系统及其数据采集方法、服务器及介质的应用领域不做限定。
首先对本申请所涉及的名词进行解释:
小型机:是指采用精简指令集处理器,性能和价格介于PC服务器和大型主机之间的一种高性能64位计算机。
文件传输协议(File Transfer Protocol;简称:FTP):是用于在网络上进行文件传输的一套标准协议,允许用户以文件操作的方式(如文件的增、删、改、查、传送等)与另一主机相互通信。然而,用户并不真正登录到自己想要存取的计算机上面而成为完全用户,可用FTP程序访问远程资源,实现用户往返传输文件、目录管理以及访问电子邮件等等,即使双方计算机可能配有不同的操作系统和文件存储方式。
现有技术中,对于能够搭载X86平台的小型机,可以通过使用开源软件对其运行情况、交易量、响应时间以及成功率进行监控,但对于无法使用X86平台的小型机则无法使用开源软件对其进行监控。
为解决上述问题,本申请构思在于如何对无法使用X86平台的小机进行开源监控处理。
本申请具体的应用场景为:对于无法应用X86平台的小型机,无法使用开源软件对其进行监控处理的情况。
本申请提供的数据传输的方法,旨在解决现有技术的如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
图1为本申请提供的一种银行业务系统的数据采集方法实施例一的流程示意图,如图1所示,该方法具体包括一下步骤:
步骤S101:根据待采集数据的文件标识,从业务系统的数据库获取携带文件标识的文件。
在本实施例中,待采集数据的文件标识可根据实际情况进行配置设置。
步骤S102:查找携带文件标识的文件对应的读取位置记录和访问时间记录,并根据读取位置记录和访问时间记录,获取文件中待采集的文件内容。
其中,读取位置记录为上一次数据采集操作对文件的文件内容的读取位置,访问时间记录为上一次数据采集操作对文件的文件内容的访问时间。
具体的,实时产生的数据会被记录在文件中,上一次对文件的文件内容进行数据采集,并记录被采集到的数据的在该文件中的位置,即读取位置;除此之外,也对上次采集操作的时间进行记录,即访问时间。
步骤S103:记录待采集的文件内容对应的读取位置和访问时间。
在本实施例中,记录本次数据采集操作获取到的数据在文件中的位置,同时记录本次数据采集操作的时间。
步骤S104:根据数据接收系统的类型选取数据发送模式,并按照数据发送模式将待采集的文件内容发送给数据接收系统。
在本实施例中,可根据目标端即数据接收系统的类型,选择不同的数据发送模式进行数据发送,提升数据传输的稳定性,提高数据传输的效率。
在本实施例中,根据待采集数据的文件标识,从业务系统的数据库获取携带文件标识的文件;查找携带文件标识的文件对应的读取位置记录和访问时间记录,并根据读取位置记录和访问时间记录,获取文件中待采集的文件内容,其中,读取位置记录为上一次数据采集操作对文件的文件内容的读取位置,访问时间记录为上一次数据采集操作对文件的文件内容的访问时间;记录待采集的文件内容对应的读取位置和访问时间;根据数据接收系统的类型选取数据发送模式,并按照数据发送模式将待采集的文件内容发送给数据接收系统。实现了基于开源软件实时采集无法应用X86平台的小型机产生的数据,解决了现有技术中,对于无法应用X86平台的小型机,不能够使用开源软件对其进行监控处理的问题。
图2为本申请提供的一种银行业务系统的数据采集方法实施例二的流程示意图;如图2所示,该银行业务系统的数据采集方法包括以下步骤:
步骤S201:根据待采集数据的文件标识,从业务系统的数据库获取携带文件标识的文件。
在本实施例中,待采集数据的文件标识可根据实际情况进行配置设置。
步骤S202:查找携带文件标识的文件对应的读取位置记录和访问时间记录。
其中,读取位置记录为上一次数据采集操作对文件的文件内容的读取位置,访问时间记录为上一次数据采集操作对文件的文件内容的访问时间。
具体的,实时产生的数据会被记录在文件中,每一次对文件的文件内容进行数据采集,并记录被采集到的数据的在该文件中的位置,即读取位置;除此之外,也对上次采集操作的时间进行记录,即访问时间。
步骤S203:判断是否存在携带文件标识的文件的读取位置记录,若是,则执行步骤S204,若否,则执行步骤S208。
在本实施例中,若存在携带有文件标识的读取位置记录,则说明对该携带有文件标识的文件进行过采集。
步骤S204:根据访问时间记录和文件中各文件内容的时间戳判断携带文件标识的文件是否存在新增的文件内容,若是,则执行步骤S205,若否,则执行步骤S209。
其中,时间戳为文件内容生成时间。
在本实施例中,间隔固定时间会生成一个新的带有文件标识的文件,该文件用来记录这个时间间隔中小型机产生的数据。本步骤中新增文件内容即为新的带有文件标识的文件的内容,即本步骤判断在上一次读取记录时间后,是否存在新的带有文件标识的文件。具体的,若不存在新的带有文件标识的文件,则说明该被监控的小型机在上一次数据采集到现在这次数据采集的时间内没有产生新的带有该文件标识的文件。
步骤S205:将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。执行步骤S206。
具体的,根据时间戳,对时间戳在上次访问时间之后的新增文件内容按照时间进行排序;根据读取位置记录确定本次数据采集的初始文件内容;将初始文件内容,与初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到未采集的文件内容。实现对待采集数据的增量采集,支持文件切换后的采集,保证数据不丢失。
步骤S206:记录待采集的文件内容对应的读取位置和访问时间。
步骤S207:根据数据接收系统的类型选取数据发送模式,并按照数据发送模式将待采集的文件内容发送给数据接收系统。
具体的,若数据接收系统为批量系统,则压缩处理文件内容,并根据文件传输协议FTP进行发送处理。
若数据接收系统为联机总线系统,则通过批量发送消息的方式对文件内容进行发送处理。
步骤S208:将初始文件至时间戳在本次数据采集时间内的所有文件确定为未采集的文件内容。执行步骤S206。
在本实施例中,若不存在携带文件标识的文件的读取位置记录,则说明是首次对带有该文件标识文件的采集,即获取初始文件至本次采集时间内所有文件内容。
步骤S209:将时间戳在上次访问时间对应的文件中新增内容确定为未采集的文件内容。执行步骤S206。
在本实施例中,若不存在新增的文件内容即不存在新的带有文件标识的文件,则说明在上一次数据采集到现在这次数据采集的时间内没有产生新的带有该文件标识的文件,则直接获取上一次数据采集对应文件中未被采集的文件内容作为待采集的文件内容。
在本实施例中,通过判断是否存在携带文件标识的文件的读取位置记录,判断该带有文件标识的文件是否曾经被采集,通过判断携带文件标识的文件是否存在新增的文件内容确定待采集的文件内容,提高数据采集精确度,提升数据采集效率,实现增量数据采集,同时根据数据接收系统的类型选取数据发送模式,将待采集的文件内容发送给数据接收系统,提升了数据传输的稳定性,提高数据传输的效率。本申请实现了基于开源软件实时采集无法应用X86平台的小型机产生的数据,解决了现有技术中,对于无法应用X86平台的小型机,不能够使用开源软件对其进行实时数据采集及监控处理的问题,除此之外,本申请对系统的侵入性相对较低,开发时只需配置数据源和目标即数据库和数据接收系统。
图3为本申请提供的一种银行业务系统实施例的结构示意图;如图3所示,该银行业务系统30包括:获取模块31、记录模块32、发送模块33。其中,获取模块31,用于根据待采集数据的文件标识,从业务系统的数据库获取携带文件标识的文件;获取模块31,还用于查找携带文件标识的文件对应的读取位置记录和访问时间记录,并根据读取位置记录和访问时间记录,获取文件中待采集的文件内容,读取位置记录为上一次数据采集操作对文件的文件内容的读取位置,访问时间记录为上一次数据采集操作对文件的文件内容的访问时间;记录模块32,用于记录待采集的文件内容对应的读取位置和访问时间;发送模块33,用于根据数据接收系统的类型选取数据发送模式,并按照数据发送模式将待采集的文件内容发送给数据接收系统。
本实施例中的测试的处理系统可以执行上述图1所示的方法实例的,其实现原理和技术效果相类似,此处不再赘述。
在一种可能的实施方案中,获取模块31具体用于:
查找携带文件标识的文件的读取位置记录。
若存在携带文件标识的文件的读取位置记录,则根据访问时间记录和文件中各文件内容的时间戳判断携带文件标识的文件是否存在新增的文件内容,时间戳为文件内容生成时间。
若存在新增的文件内容,则将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。
在一种可能的实施方案中,获取模块31具体用于:
根据时间戳,对时间戳在上次访问时间之后的新增文件内容按照时间进行排序。
根据读取位置记录确定本次数据采集的初始文件内容。
将初始文件内容,与初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到未采集的文件内容。
在一种可能的实施方案中,获取模块31还用于:
若不存新增文件内容,则将时间戳在上次访问时间对应的文件中新增内容确定为未采集的文件内容。
在一种可能的实施方案中,获取模块31还用于:
若文件不存在读取位置记录,则将初始文件至时间戳在本次数据采集时间内的所有文件确定为未采集的文件内容。
在一种可能的实施方案中,发送模块33具体用于:
若数据接收系统为批量系统,则压缩处理文件内容,并根据文件传输协议FTP进行发送处理。
或者,若数据接收系统为联机总线系统,则通过批量发送消息的方式对文件内容进行发送处理。
图4为本申请提供的一种服务器的结构示意图,如图4所示,该服务器40包括:处理器41,存储器42,以及通信接口43;其中,存储器42用于存储处理器41可执行的可执行指令;处理器41配置为经由执行可执行指令来执行前述任一方法实施例中的技术方案。
可选的,存储器42既可以是独立的,也可以跟处理器41集成在一起。
可选的,当存储器42是独立于处理器41之外的器件时,服务器40还可以包括:总线,用于将上述器件连接起来。
该服务器用于执行前述任一方法实施例中的技术方案,其实现原理和技术效果类似,在此不再赘述。
本申请实施例还提供一种可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现前述任一实施例提供的技术方案。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或对其中部分或全部技术特征进行等同替换;而这些修改或替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。
Claims (14)
1.一种银行业务系统的数据采集方法,其特征在于,包括:
根据待采集数据的文件标识,从业务系统的数据库获取携带所述文件标识的文件;
查找所述携带所述文件标识的文件对应的读取位置记录和访问时间记录,并根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容;所述读取位置记录为上一次数据采集操作对所述文件的文件内容的读取位置;所述访问时间记录为所述上一次数据采集操作对所述文件的文件内容的访问时间;
记录所述待采集的文件内容对应的读取位置和访问时间;
根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统。
2.根据权利要求1所述的方法,其特征在于,所述根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容,包括:
查找所述携带所述文件标识的文件的读取位置记录;
若存在所述携带所述文件标识的文件的读取位置记录,则根据所述访问时间记录和所述文件中各文件内容的时间戳判断所述携带所述文件标识的文件是否存在新增的文件内容,所述时间戳为所述文件内容生成时间;
若所述存在新增的文件内容,则将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。
3.根据权利要求2所述的方法,其特征在于,所述将时间戳在所述上次访问时间之后的新增文件内容确定为所述未采集的文件内容,包括:
根据所述时间戳,对时间戳在所述上次访问时间之后的新增文件内容按照时间进行排序;
根据所述读取位置记录确定本次数据采集的初始文件内容;
将所述初始文件内容,与所述初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到所述未采集的文件内容。
4.根据权利要求2所述的方法,其特征在于,还包括:
若不存新增文件内容,则将时间戳在所述上次访问时间对应的文件中新增内容确定为所述未采集的文件内容。
5.根据权利要求2所述的方法,其特征在于,还包括:
若所述文件不存在所述读取位置记录,则将初始文件至时间戳在本次数据采集时间内的所有文件确定为所述未采集的文件内容。
6.根据权利要求1至5任一所述的方法,其特征在于,所述根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统,包括:
若所述数据接收系统为批量系统,则压缩处理所述文件内容,并根据文件传输协议FTP进行发送处理;或者,
若所述数据接收系统为联机总线系统,则通过批量发送消息的方式对所述文件内容进行发送处理。
7.一种银行业务系统,其特征在于,包括:
获取模块,用于根据待采集数据的文件标识,从业务系统的数据库获取携带所述文件标识的文件;
所述获取模块,还用于查找所述携带所述文件标识的文件对应的读取位置记录和访问时间记录,并根据所述读取位置记录和访问时间记录,获取所述文件中待采集的文件内容;所述读取位置记录为上一次数据采集操作对所述文件的文件内容的读取位置;所述访问时间记录为所述上一次数据采集操作对所述文件的文件内容的访问时间;
记录模块,用于记录所述待采集的文件内容对应的读取位置和访问时间;
发送模块,用于根据数据接收系统的类型选取数据发送模式,并按照所述数据发送模式将所述待采集的文件内容发送给所述数据接收系统。
8.根据权利要求7所述的系统,其特征在于,所述获取模块具体用于:
查找所述携带所述文件标识的文件的读取位置记录;
若存在所述携带所述文件标识的文件的读取位置记录,则根据所述访问时间记录和所述文件中各文件内容的时间戳判断所述携带所述文件标识的文件是否存在新增的文件内容,所述时间戳为所述文件内容生成时间;
若所述存在新增的文件内容,则将时间戳在上次访问时间之后的新增文件内容确定为未采集的文件内容。
9.根据权利要求8所述的系统,其特征在于,所述获取模块具体用于:
根据所述时间戳,对时间戳在所述上次访问时间之后的新增文件内容按照时间进行排序;
根据所述读取位置记录确定本次数据采集的初始文件内容;
将所述初始文件内容,与所述初始文件内容至最新时间戳对应的文件之间的所有文件内容进行合并处理,得到所述未采集的文件内容。
10.根据权利要求8所述的系统,其特征在于,所述获取模块还用于:
若不存新增文件内容,则将时间戳在所述上次访问时间对应的文件中新增内容确定为所述未采集的文件内容。
11.根据权利要求8所述的系统,其特征在于,所述获取模块还用于:
若所述文件不存在所述读取位置记录,则将初始文件至时间戳在本次数据采集时间内的所有文件确定为所述未采集的文件内容。
12.根据权利要求7至11任一所述的系统,其特征在于,所述发送模块具体用于:
若所述数据接收系统为批量系统,则压缩处理所述文件内容,并根据文件传输协议FTP进行发送处理;或者,
若所述数据接收系统为联机总线系统,则通过批量发送消息的方式对所述文件内容进行发送处理。
13.一种服务器,其特征在于,包括:
处理器,存储器,通信接口;
所述存储器用于存储所述处理器可执行的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1至6中任一项所述的银行业务系统的数据采集方法。
14.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的银行业务系统的数据采集方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310614276.8A CN116645182A (zh) | 2023-05-29 | 2023-05-29 | 一种银行业务系统及其数据采集方法、服务器及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310614276.8A CN116645182A (zh) | 2023-05-29 | 2023-05-29 | 一种银行业务系统及其数据采集方法、服务器及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116645182A true CN116645182A (zh) | 2023-08-25 |
Family
ID=87614872
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310614276.8A Pending CN116645182A (zh) | 2023-05-29 | 2023-05-29 | 一种银行业务系统及其数据采集方法、服务器及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116645182A (zh) |
-
2023
- 2023-05-29 CN CN202310614276.8A patent/CN116645182A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20060112083A1 (en) | Object relation information management program, method, and apparatus | |
CN114647698A (zh) | 数据同步方法、装置及计算机存储介质 | |
CN116204438A (zh) | 测试用例生成方法、自动化测试方法和相关装置 | |
CN114328566A (zh) | 关系图谱的更新方法、装置、介质、设备及生成方法 | |
CN116645182A (zh) | 一种银行业务系统及其数据采集方法、服务器及介质 | |
CN115858320A (zh) | 操作日志记录方法、装置、介质及产品 | |
CN112148574B (zh) | 一种性能数据采集方法、计算机设备及存储介质 | |
CN115525449A (zh) | 微服务数据传输系统、方法及存储介质 | |
CN105988917B (zh) | 异常信息获取方法及装置 | |
CN112597119A (zh) | 一种处理日志的生成方法、装置及存储介质 | |
CN114090514A (zh) | 分布式系统的日志检索方法及装置 | |
CN111459819B (zh) | 软件测试方法及装置、电子设备、计算机可读介质 | |
CN108805741B (zh) | 一种电能质量数据的融合方法、装置及系统 | |
CN109740027B (zh) | 数据交换方法、装置、服务器和存储介质 | |
CN109785102A (zh) | 账户体系信息推送方法、装置、计算机设备和存储介质 | |
CN112417022B (zh) | 用于获取数据的方法、装置、终端及存储介质 | |
CN110908886A (zh) | 一种数据发送方法、装置、电子设备和存储介质 | |
CN117632445B (zh) | 请求处理方法以及装置、任务执行方法以及装置 | |
CN117407369B (zh) | 操作日志记录方法、装置及电子设备 | |
CN111708757B (zh) | 数据资源处理方法、装置和系统,存储介质和电子设备 | |
CN113138999B (zh) | 数据处理方法及装置、计算机存储介质、电子设备 | |
CN115017103B (zh) | 金融业务影像信息获取方法、装置、电子设备及存储介质 | |
US20240185196A1 (en) | Reduced memory resources for proactive monitoring of electronic transactions | |
CN113778913A (zh) | 一种缓存的处理方法、电子设备及计算机存储介质 | |
CN111639936A (zh) | 交易信息的获取方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |