CN111581244A - 一种异构系统业务交易数据有序同步方法、系统及设备 - Google Patents

一种异构系统业务交易数据有序同步方法、系统及设备 Download PDF

Info

Publication number
CN111581244A
CN111581244A CN202010407449.5A CN202010407449A CN111581244A CN 111581244 A CN111581244 A CN 111581244A CN 202010407449 A CN202010407449 A CN 202010407449A CN 111581244 A CN111581244 A CN 111581244A
Authority
CN
China
Prior art keywords
transaction data
data
database
party system
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010407449.5A
Other languages
English (en)
Other versions
CN111581244B (zh
Inventor
吕榕林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Zkteco Biometric Identification Technology Co ltd
Original Assignee
Xiamen Zkteco Biometric Identification Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Zkteco Biometric Identification Technology Co ltd filed Critical Xiamen Zkteco Biometric Identification Technology Co ltd
Priority to CN202010407449.5A priority Critical patent/CN111581244B/zh
Publication of CN111581244A publication Critical patent/CN111581244A/zh
Application granted granted Critical
Publication of CN111581244B publication Critical patent/CN111581244B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G06F16/24552—Database cache management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Software Systems (AREA)
  • Accounting & Taxation (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Technology Law (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例涉及一种异构系统业务交易数据有序同步方法、系统及设备，通过数据接收方接收交易数据并将交易数据传送至MQ服务器，根据MQ服务器队列先进先出的特性保证交易数据的有序性，并采用数据库存储队列后的交易数据再通过定时任务对交易数据进行标识并在缓存数据库中存储再将标识后的交易数据传送至第三方系统上，第三方系统处理标识后的数据并将处理结果反馈至数据库中，实现数据接收方与第三方系统的交易数据同步，解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。

Description

一种异构系统业务交易数据有序同步方法、系统及设备
技术领域
本发明涉及软件通信技术领域，尤其涉及一种异构系统业务交易数据有序同步方法、系统及设备。
背景技术
SaaS平台是运营saas软件的平台，SaaS提供商为企业搭建信息化所需要的所有网络基础设施及软件、硬件运作平台，并负责所有前期的实施、后期的维护等一系列服务，企业无需购买软硬件、建设机房、招聘IT人员，即可通过互联网使用信息系统。SaaS是一种软件布局模型，其应用专为网络交付而设计，便于用户通过互联网托管、部署及接入。
现在的多租户SaaS云业务系统，线上拥有海量的用户数据，每天都会产生大量的交易数据(比如:人员、公司、设备的增删改等数据)，这些交易数据往往都需要实时且可靠地按顺序地同步到第三方系统，一旦交易数据丢失或延迟送达，都会各第三方系统服务的对象造成损失(例如：经济损失)。
在SaaS云业务系统中采用异构系统数据同步方法进行数据传送，传统的线下系统，用户数据量没有这么大，网络环境也不像互联网云环境复杂，现有的异构系统数据同步方法主要用于数据库之间同步数据和通过数据库中间表，发起方将交易数据写到中间表，接收方通过读取中间表的数据，写入到第三方系统的数据库中。数据库之间同步数据是采用ETL方式，通过数据抽取、清洗、转换、载入实现数据的同步，但是此方式无法做到数据及时性。通过数据库中间表实现数据同步需要的条件是交易双方的系统在同一个局域网络，交易双方都可以访问到数据库中间表，若SaaS云业务系统用于互联网应用(即跨局域网)，此方式无法实现数据同步。
发明内容
本发明实施例提供了一种异构系统业务交易数据有序同步方法、系统及设备，用于解决现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。
为了实现上述目的，本发明实施例提供如下技术方案：
一种异构系统业务交易数据有序同步方法，包括以下步骤：
S1.数据接收方从数据发送方获取交易数据，并将所述交易数据传送至MQ服务器；
S2.监听所述MQ服务器中的所述交易数据，得到所述MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
S3.在所述数据库中采用定时任务对队列后的交易数据进行拉取并对每一条交易数据进行标识，得到标识交易数据并将所述标识交易数据传送至缓存数据库；
S4.所述定时任务调用第三方系统数据同步接口将所述缓存数据库中的所述标识交易数据传送至第三方系统，所述第三方系统处理所述标识交易数据并将处理的结果反馈至所述数据接收方；
S5.所述数据接收方对反馈结果进行处理，得到标识交易数据执行结果并传送至所述数据库。
优选地，在所述S3中，还包括：在所述数据库中对队列后的交易数据进行拉取过程中，若一条交易数据存在标识，则该条交易数据处于处理过程且该条交易数据不允许传送至所述第三方系统。
优选地，在所述S5中，所述数据接收方对所述第三方系统反馈的结果进行处理，具体包括：
若所述第三方系统处理所述标识交易数据的结果为交易成功，所述缓存数据库中的所述标识交易数据不再传送给所述第三方系统；
若所述第三方系统处理所述标识交易数据的结果为交易失败，所述第三方系统上注明失败原因以及所述缓存数据库中的所述标识交易数据不再传送给所述第三方系统；
若所述定时任务调用第三方系统数据同步接口失败，所述缓存数据库中的所述标识交易数据会循环传送给所述第三方系统，直至所述第三方系统成功接收传送的标识交易数据为止。
优选地，该异构系统业务交易数据有序同步方法还包括：若所述定时任务调用第三方系统数据同步接口失败，所述数据接收方发出告警信息。
优选地，所述数据库为非关系NoSql数据库。
优选地，所述缓存数据库为分布式缓存数据库。
本发明还提供一种异构系统业务交易数据有序同步系统，包括数据发送方、数据接收方和第三方系统；
所述数据发送方，用于给所述数据接收方提供交易数据；
所述数据接收方，用于接收所述交易数据并按照如权利要求1-6任意一项所述异构系统业务交易数据有序同步方法将所述交易数据同步传送至所述第三方系统上；
所述第三方系统，用于执行处理所述交易数据并将处理结果反馈至所述数据接收方。
优选地，所述数据接收方包括数据接收传送模块、监听模块、定时任务模块和处理反馈结果模块；
所述数据接收传送模块，用于接收所述数据发送方发送的所述交易数据并将接收的所述交易数据传送至MQ服务器；
所述监听模块，用于监听所述MQ服务器中的交易数据，得到所述MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
所述定时任务模块，用于获取所述数据库中标识交易数据并将所述标识交易数据传送至缓存数据库，以及调用所述第三方系统数据同步接口将所述缓存数据库中的所述标识交易数据传送至所述第三方系统；
所述处理反馈结果模块，用于根据所述第三方系统反馈结果进行处理，得到标识交易数据执行结果并传送至所述数据库。
优选地，所述缓存数据库为分布式缓存数据库，所述数据库为非关系NoSql数据库。
本发明还提供一种设备，包括处理器以及存储器；
所述存储器，用于存储程序代码，并将所述程序代码传输给所述处理器；
所述处理器，用于根据所述程序代码中的指令执行上述所述的异构系统业务交易数据有序同步方法。
从以上技术方案可以看出，本发明实施例具有以下优点：
1.该异构系统业务交易数据有序同步方法通过数据接收方接收交易数据并将交易数据传送至MQ服务器，根据MQ服务器队列先进先出的特性保证交易数据的有序性，并采用数据库存储队列后的交易数据再通过定时任务对交易数据进行标识并在缓存数据库中存储再将标识后的交易数据传送至第三方系统上，第三方系统处理标识后的数据并将处理结果反馈至数据库中，实现数据接收方与第三方系统的交易数据同步，解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题；
2.该异构系统业务交易数据有序同步系统通过数据接收方接收交易数据并将交易数据传送至MQ服务器，根据MQ服务器队列先进先出的特性保证交易数据的有序性，并采用数据库存储队列后的交易数据再通过定时任务模块对交易数据进行标识并在缓存数据库中存储再将标识后的交易数据传送至第三方系统上，第三方系统处理标识后的数据并将处理结果反馈至数据库中，实现数据接收方与第三方系统的交易数据同步，解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例所述的异构系统业务交易数据有序同步方法的步骤流程图。
图2为本发明实施例所述的异构系统业务交易数据有序同步系统的框架图。
图3为本发明实施例所述的异构系统业务交易数据有序同步系统的另一框架图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本申请实施例提供了一种异构系统业务交易数据有序同步方法、系统及设备，实现了跨局域网(即广域网)的两两异构系统中交易数据有序实时同步，用于解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。在本发明实施例中，该异构系统业务交易数据有序同步方法、系统及设备是以应用于SaaS平台中的SaaS云业务系统上作为案例进行说明。
实施例一：
图1为本发明实施例所述的异构系统业务交易数据有序同步方法的步骤流程图。
如图1所示，本发明实施例提供了一种异构系统业务交易数据有序同步方法，包括以下步骤：
S1.数据接收方从数据发送方获取交易数据，并将交易数据传送至MQ服务器；
S2.监听MQ服务器中的交易数据，得到MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
S3.在数据库中采用定时任务对队列后的交易数据进行拉取并对每一条交易数据进行标识，得到标识交易数据并将标识交易数据传送至缓存数据库；
S4.定时任务调用第三方系统数据同步接口将缓存数据库中的标识交易数据传送至第三方系统，第三方系统处理标识交易数据并将处理的结果反馈至数据接收方；
S5.数据接收方对反馈结果进行处理，得到标识交易数据执行结果并传送至数据库。
在本发明实施例的S1中，数据发送方调用数据接收方的的API接口，数据发送方通过API接口将交易数据传送至收据接收方中，数据接收方将交易数据传送(写入)至MQ服务器中。在本实施例中，是否交易数据成功传送至MQ服务器中的信息还会反馈回给数据接收方中。并且MQ服务器只用于接收到的数据写入，在MQ服务器中不对交易数据进行业务处理，MQ服务器而是先迅速返回是否成功接收交易数据的信息返回给数据接收方，MQ服务器起到提升该异构系统业务交易数据有序同步方法吞吐量。
需要说明的是，在本实施例中，MQ服务器优选采用金融级应用Mq服务器Rabbitmq产品，借助金融级MQ服务器，既提升了业务交易数据的响应速度，同时借助MQ服务器中的队列先进先出的特性保证交易数据的有序性，也确保MQ服务器中消息队列的交易数据永不丢失。在其他的实施例中，MQ服务器也可以采用高可靠性其他类型的MQ服务器产品。MQ为消息队列，是基础数据结构中“先进先出”的一种数据结构。
在本发明实施例的S2中，监听MQ服务器中消息队列的交易数据，按照先进先出的策略，获取队列后的交易数据，同时将队列后的交易数据传送(写入)数据库中。在本实施例中，数据库优先选为非关系NoSql数据库。
需要说明的是，非关系NoSql数据库可以为MongoDB，MongoDB是基于分布式文件储存的非关系数据库，能够存储海量数据，满足大量业务交易数据存储的需求。该异构系统业务交易数据有序同步方法借助非关系数据库NoSQL有效解决对海量交易数据的存储，提高海量交易数据存储的高效操作。
在本发明实施例的S3中，从数据库中采用定时任务拉取需要同步到第三方系统的交易数据，还在数据库中还将队列后的交易数据中每条交易数据进行标识，使得每条交易数据得到唯一的标识值，定时任务还将标识后的交易数据传送(写入)至缓存数据库中。
需要说明的是，缓存数据库优选选为分布式缓存数据库，该异构系统业务交易数据有序同步方法借助分布式缓存数据库有效解决同步锁的问题，避免交易数据重复同步传送至第三方系统。
在本发明实施例的S4中，定时任务调用第三方系统的API接口(例如：Http/HttpsAPI)，将缓存数据库中缓存的标识交易数据传送(写入)至第三方系统上，第三方系统接收标识交易数据后进行处理，第三方系统处理的标识交易数据是否交易成功，并将处理的结果反馈至数据接收方。在本实施例中，定时任务无法调用第三方系统的API接口，使得缓存数据库中缓存的标识交易数据不能传送(写入)至第三方系统上，第三方系统也会将此结果反馈至数据接收方。
在本发明实施例的S5中，数据接收方根据第三方系统反馈的结果做不同处理，得到标识交易数据执行结果，并将标识交易数据执行结果传送至数据库中，完成该标识交易数据的同步，即是数据接收方的交易数据同步到第三方系统上。
本发明提供的一种异构系统业务交易数据有序同步方法通过数据接收方接收交易数据并将交易数据传送至MQ服务器，根据MQ服务器队列先进先出的特性保证交易数据的有序性，并采用数据库存储队列后的交易数据再通过定时任务对交易数据进行标识并在缓存数据库中存储再将标识后的交易数据传送至第三方系统上，第三方系统处理标识后的数据并将处理结果反馈至数据库中，实现数据接收方与第三方系统的交易数据同步，解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。
在本发明的一个实施例中，在所述S3中，还包括：在数据库中对队列后的交易数据进行拉取过程中，若一条交易数据存在标识，则该条交易数据处于处理过程且该条交易数据不允许传送至第三方系统。
需要说明的是，在数据中采用定时任务主动拉取数据库的交易数据已有标识值的，表示标记该条交易数据正在处理中，不允许定时任务在数据库获取该条交易数据传送至缓存数据库中存储，即是不允许从数据库重复取走交易数据的操作，防止交易数据重复同步给第三方系统。其中，定时任务是指通过设置定时时间(如：每隔30秒)重复去操作拉取数据库的交易数据的执行任务。
在本发明的一个实施例中，在所述S5中，数据接收方对第三方系统反馈的结果进行处理，具体包括：
若第三方系统处理标识交易数据的结果为交易成功，缓存数据库中的标识交易数据不再传送给第三方系统；
若第三方系统处理标识交易数据的结果为交易失败，第三方系统上注明失败原因以及缓存数据库中的标识交易数据不再传送给第三方系统；
若定时任务调用第三方系统数据同步接口失败，缓存数据库中的标识交易数据会循环传送给第三方系统，直至第三方系统成功接收传送的标识交易数据为止。其中，若定时任务调用第三方系统数据同步接口失败，数据接收方发出告警信息。
需要说明的是，若第三方系统处理标识交易数据的结果为交易成功，则将该条交易数据记录标记为已消费，并且缓存数据库中的标识交易数据不再传送给第三方系统。若第三方系统处理标识交易数据的结果为交易失败，即是数据接收方同步给第三方系统上的交易数据实施不能同步，则将该条交易数据记录标记为已消费，同时在第三方系统上注明失败原因以及缓存数据库中的标识交易数据不再传送给第三方系统。若定时任务调用第三方系统数据同步接口失败(比如：网络连接失败)，则缓存数据库中的标识交易数据会一直循环传送直到第三方系统成功接收缓存数据库中的标识交易数据，数据接收方会根据第三方反馈的信息发出(通过邮件、短信)告警信息通知数据接收方的管理人员。
实施例二：
图2为本发明实施例所述的异构系统业务交易数据有序同步系统的框架图，图3为本发明实施例所述的异构系统业务交易数据有序同步系统的另一框架图。
如图2和图3所示，本发明实施例还提供一种异构系统业务交易数据有序同步系统，包括数据发送方10、数据接收方20和第三方系统30：
数据发送方10，用于给数据接收方20提供交易数据；
数据接收方20，用于接收交易数据并按照上述异构系统业务交易数据有序同步方法将交易数据同步传送至第三方系统30上；
第三方系统30，用于执行处理交易数据并将处理结果反馈至数据接收方20。
在本发明的一个实施例中，数据接收方20包括数据接收传送模块21、监听模块22、定时任务模块23和处理反馈结果模块24；
数据接收传送模块21，用于接收数据发送方10发送的交易数据并将接收的交易数据传送至MQ服务器；
监听模块22，用于监听MQ服务器中的交易数据，得到MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
定时任务模块23，用于获取数据库中标识交易数据并将标识交易数据传送至缓存数据库，以及调用第三方系统数据同步接口将缓存数据库中的标识交易数据传送至第三方系统30；
处理反馈结果模块24，用于根据第三方系统30反馈结果进行处理，得到标识交易数据执行结果并传送至数据库。
需要说明的是，数据发送方调用数据接收方的的API接口，数据发送方通过API接口将交易数据传送至收据接收方中，数据接收方将交易数据传送(写入)至MQ服务器中，监听MQ服务器中消息队列的交易数据，按照先进先出的策略，获取队列后的交易数据，同时将队列后的交易数据传送(写入)数据库中；从数据库中采用定时任务拉取需要同步到第三方系统的交易数据，还在数据库中还将队列后的交易数据中每条交易数据进行标识，使得每条交易数据得到唯一的标识值，定时任务模块23还将标识后的交易数据传送(写入)至缓存数据库中；定时任务模块调用第三方系统的API接口(例如：Http/Https API)，将缓存数据库中缓存的标识交易数据传送(写入)至第三方系统上，第三方系统接收标识交易数据后进行处理，第三方系统处理的标识交易数据是否交易成功，并将处理的结果反馈至数据接收方；数据接收方根据第三方系统反馈的结果做不同处理，得到标识交易数据执行结果，并将标识交易数据执行结果传送至数据库中，完成该标识交易数据的同步，即是数据接收方的交易数据同步到第三方系统上。
在本实施例中，缓存数据库优选选为分布式缓存数据库，该异构系统业务交易数据有序同步方法借助分布式缓存数据库有效解决同步锁的问题，避免交易数据重复同步传送至第三方系统。数据库优先选为非关系NoSql数据库，非关系NoSql数据库可以为MongoDB，MongoDB是基于分布式文件储存的非关系数据库，能够存储海量数据，满足大量业务交易数据存储的需求。
本发明提供的一种异构系统业务交易数据有序同步系统通过数据接收方接收交易数据并将交易数据传送至MQ服务器，根据MQ服务器队列先进先出的特性保证交易数据的有序性，并采用数据库存储队列后的交易数据再通过定时任务模块对交易数据进行标识并在缓存数据库中存储再将标识后的交易数据传送至第三方系统上，第三方系统处理标识后的数据并将处理结果反馈至数据库中，实现数据接收方与第三方系统的交易数据同步，解决了现有在SaaS云业务系统中采用异构系统数据同步方法存在数据无法实时同步传送或者跨局域网同步传送数据的技术问题。
实施例三：
本发明实施例提供了一种设备，包括处理器以及存储器；
存储器，用于存储程序代码，并将程序代码传输给处理器；
处理器，用于根据程序代码中的指令执行上述的异构系统业务交易数据有序同步方法。
需要说明的是，处理器用于根据所程序代码中的指令执行上述的一种异构系统业务交易数据有序同步方法实施例中的步骤。或者，处理器执行计算机程序时实现上述各系统/装置实施例中各模块/单元的功能。
示例性的，计算机程序可以被分割成一个或多个模块/单元，一个或者多个模块/单元被存储在存储器中，并由处理器执行，以完成本申请。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述计算机程序在终端设备中的执行过程。
终端设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。终端设备可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器可以是终端设备的内部存储单元，例如终端设备的硬盘或内存。存储器也可以是终端设备的外部存储设备，例如终端设备上配备的插接式硬盘，智能存储卡(SmartMedia Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。进一步地，存储器还可以既包括终端设备的内部存储单元也包括外部存储设备。存储器用于存储计算机程序以及终端设备所需的其他程序和数据。存储器还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种异构系统业务交易数据有序同步方法，其特征在于，包括以下步骤：
S1.数据接收方从数据发送方获取交易数据，并将所述交易数据传送至MQ服务器；
S2.监听所述MQ服务器中的所述交易数据，得到所述MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
S3.在所述数据库中采用定时任务对队列后的交易数据进行拉取并对每一条交易数据进行标识，得到标识交易数据并将所述标识交易数据传送至缓存数据库；
S4.所述定时任务调用第三方系统数据同步接口将所述缓存数据库中的所述标识交易数据传送至第三方系统，所述第三方系统处理所述标识交易数据并将处理的结果反馈至所述数据接收方；
S5.所述数据接收方对反馈结果进行处理，得到标识交易数据执行结果并传送至所述数据库。
2.根据权利要求1所述的异构系统业务交易数据有序同步方法，其特征在于，在所述S3中，还包括：在所述数据库中对队列后的交易数据进行拉取过程中，若一条交易数据存在标识，则该条交易数据处于处理过程且该条交易数据不允许传送至所述第三方系统。
3.根据权利要求1所述的异构系统业务交易数据有序同步方法，其特征在于，在所述S5中，所述数据接收方对所述第三方系统反馈的结果进行处理，具体包括：
若所述第三方系统处理所述标识交易数据的结果为交易成功，所述缓存数据库中的所述标识交易数据不再传送给所述第三方系统；
若所述第三方系统处理所述标识交易数据的结果为交易失败，所述第三方系统上注明失败原因以及所述缓存数据库中的所述标识交易数据不再传送给所述第三方系统；
若所述定时任务调用第三方系统数据同步接口失败，所述缓存数据库中的所述标识交易数据会循环传送给所述第三方系统，直至所述第三方系统成功接收传送的标识交易数据为止。
4.根据权利要求3所述的异构系统业务交易数据有序同步方法，其特征在于，还包括：若所述定时任务调用第三方系统数据同步接口失败，所述数据接收方发出告警信息。
5.根据权利要求1所述的异构系统业务交易数据有序同步方法，其特征在于，所述缓存数据库为分布式缓存数据库。
6.根据权利要求1所述的异构系统业务交易数据有序同步方法，其特征在于，所述数据库为非关系NoSql数据库。
7.一种异构系统业务交易数据有序同步系统，其特征在于，包括数据发送方、数据接收方和第三方系统；
所述数据发送方，用于给所述数据接收方提供交易数据；
所述数据接收方，用于接收所述交易数据并按照如权利要求1-6任意一项所述异构系统业务交易数据有序同步方法将所述交易数据同步传送至所述第三方系统上；
所述第三方系统，用于执行处理所述交易数据并将处理结果反馈至所述数据接收方。
8.根据权利要求7所述的异构系统业务交易数据有序同步系统，其特征在于，所述数据接收方包括数据接收传送模块、监听模块、定时任务模块和处理反馈结果模块；
所述数据接收传送模块，用于接收所述数据发送方发送的所述交易数据并将接收的所述交易数据传送至MQ服务器；
所述监听模块，用于监听所述MQ服务器中的交易数据，得到所述MQ服务器中队列后的交易数据，并将队列后的交易数据传送至数据库；
所述定时任务模块，用于获取所述数据库中标识交易数据并将所述标识交易数据传送至缓存数据库，以及调用所述第三方系统数据同步接口将所述缓存数据库中的所述标识交易数据传送至所述第三方系统；
所述处理反馈结果模块，用于根据所述第三方系统反馈结果进行处理，得到标识交易数据执行结果并传送至所述数据库。
9.根据权利要求8所述的异构系统业务交易数据有序同步系统，其特征在于，所述缓存数据库为分布式缓存数据库，所述数据库为非关系NoSql数据库。
10.一种设备，其特征在于，包括处理器以及存储器；
所述存储器，用于存储程序代码，并将所述程序代码传输给所述处理器；
所述处理器，用于根据所述程序代码中的指令执行权利要求1-6任一项所述的异构系统业务交易数据有序同步方法。
CN202010407449.5A 2020-05-14 2020-05-14 一种异构系统业务交易数据有序同步方法、系统及设备 Active CN111581244B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010407449.5A CN111581244B (zh) 2020-05-14 2020-05-14 一种异构系统业务交易数据有序同步方法、系统及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010407449.5A CN111581244B (zh) 2020-05-14 2020-05-14 一种异构系统业务交易数据有序同步方法、系统及设备

Publications (2)

Publication Number Publication Date
CN111581244A true CN111581244A (zh) 2020-08-25
CN111581244B CN111581244B (zh) 2023-04-25

Family

ID=72126612

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010407449.5A Active CN111581244B (zh) 2020-05-14 2020-05-14 一种异构系统业务交易数据有序同步方法、系统及设备

Country Status (1)

Country Link
CN (1) CN111581244B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284781A (ja) * 2004-03-30 2005-10-13 Nomura Research Institute Ltd Ｍｑデータ同期システム及びｍｑデータ同期プログラム
CN108256002A (zh) * 2017-12-31 2018-07-06 广东欧珀移动通信有限公司 跨机房数据同步方法、装置、系统以及服务器
CN109788053A (zh) * 2019-01-04 2019-05-21 深圳壹账通智能科技有限公司 数据同步方法和系统
CN110765206A (zh) * 2019-10-21 2020-02-07 广东小天才科技有限公司 一种数据同步系统、方法、装置、设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284781A (ja) * 2004-03-30 2005-10-13 Nomura Research Institute Ltd Ｍｑデータ同期システム及びｍｑデータ同期プログラム
CN108256002A (zh) * 2017-12-31 2018-07-06 广东欧珀移动通信有限公司 跨机房数据同步方法、装置、系统以及服务器
CN109788053A (zh) * 2019-01-04 2019-05-21 深圳壹账通智能科技有限公司 数据同步方法和系统
CN110765206A (zh) * 2019-10-21 2020-02-07 广东小天才科技有限公司 一种数据同步系统、方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN111581244B (zh) 2023-04-25

Similar Documents

Publication Publication Date Title
US20240007545A1 (en) Content payload delivery system
CN109076026B (zh) 用于基于等待时间排队的系统和方法
CN111030784A (zh) 一种信息同步方法和装置
CN110300151A (zh) 数据文件上传方法及系统
CN104796561A (zh) 分配坐席的方法、cti设备、终端和分配坐席的系统
CN111857609A (zh) 一种上传云打印日志的方法、装置和计算机存储介质
CN113704004B (zh) 通知服务的实现方法、装置、设备以及存储介质
CN109391658B (zh) 一种账号数据同步方法及其设备、存储介质、终端
CN111200653B (zh) 多平台通讯方法、多平台通讯装置及中间服务器
CN108076110B (zh) 电子数据交换系统和包含电子数据交换系统的装置
CN115951923B (zh) 订阅事件管理方法、显示系统、设备和存储介质
CN111581244B (zh) 一种异构系统业务交易数据有序同步方法、系统及设备
CN112783629A (zh) 服务调用方法、装置、电子设备及存储介质
KR20140013892A (ko) 복수의 정보 시스템에서의 출력 비교 방법
CN115525449B (zh) 微服务数据传输系统、方法及存储介质
CN113347245B (zh) 一种基于消息队列的文件分片断点传输方法及装置
US8589605B2 (en) Inbound message rate limit based on maximum queue times
CN112346661B (zh) 数据处理方法、装置和电子设备
CN113032492A (zh) 一种边缘端数据传输与存储的方法以及装置
CN112929191B (zh) 服务监控方法、系统以及相关设备、装置
CN116263926A (zh) 基于区块链的对账方法、装置和系统
CN110134547B (zh) 一种基于中间件的重复数据删除方法和相关装置
CN113766437B (zh) 一种短信发送方法和装置
CN111818468A (zh) 一种消息处理方法、系统及相关设备
CN109167668B (zh) 一种消息的通知方法、消息的通知装置及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 1301, No.132, Fengqi Road, phase III, software park, Xiamen City, Fujian Province

Applicant after: Xiamen Entropy Technology Co.,Ltd.

Address before: 361000, Xiamen three software park, Fujian Province, 8 North Street, room 2001

Applicant before: XIAMEN ZKTECO INFORMATION TECHNOLOGY Co.,Ltd.

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant