CN111367934B - 数据一致性的检验方法、装置、服务器和介质 - Google Patents
数据一致性的检验方法、装置、服务器和介质 Download PDFInfo
- Publication number
- CN111367934B CN111367934B CN202010242519.6A CN202010242519A CN111367934B CN 111367934 B CN111367934 B CN 111367934B CN 202010242519 A CN202010242519 A CN 202010242519A CN 111367934 B CN111367934 B CN 111367934B
- Authority
- CN
- China
- Prior art keywords
- database
- target data
- state
- processed
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 230000004044 response Effects 0.000 claims abstract description 64
- 238000012545 processing Methods 0.000 claims description 31
- 230000004048 modification Effects 0.000 claims description 17
- 238000012986 modification Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 5
- 230000009471 action Effects 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 abstract description 27
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013524 data verification Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/02—Banking, e.g. interest calculation or account maintenance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据一致性的检验方法、装置、服务器和介质。其中，该方法包括：当检测到第二数据库被存入目标数据时，控制第一数据库向第二数据库发送数据获取指令；若目标数据的标记字段的状态由待处理成功修改为处理中，控制第二数据库将目标数据发送至第一数据库；若第一数据库成功接收到目标数据，则控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库；若第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库一致。本发明实施例在目标数据的传输过程中实时修改目标数据的标记字段的状态，从而有效检测出第一数据库与第二数据库在传输过程中的数据一致性。
Description
技术领域
本发明实施例涉及数据分析技术领域，尤其涉及一种数据一致性的检验方法、装置、服务器和介质。
背景技术
SWIFT报文平台子系统在处理与用户的交易数据或者是银行内部数据时，主要是通过接收或者发送SWIFT Fin报文的形式实现；其中，数据是以报文格式进行传输的；在对数据进行传输时，具体是通过在存储管理器中下载或者上传指定数据，从而有效实现银行与外部或者银行与银行内部之间交互数据的准确进行。
上述方案的缺陷在于：在数据传输过程中，当发生数据丢失或者消息重复处理时，难以得到有效的检测，从而产生交易事故，使得传输方与接收方数据不一致；尤其当交易数据涉及到资金时，有可能造成钱款无法追回的情况。
发明内容
本发明实施例提供一种数据一致性的检验方法、装置、设备和介质，可以有效检测出不同数据库之间往来业务的数据一致性，保证传输方与接收方的数据统一。
第一方面，本发明实施例提供了一种数据一致性的检验方法，包括：
当检测到第二数据库被存入目标数据时，控制第一数据库向所述第二数据库发送数据获取指令；其中，所述数据获取指令用于获取所述目标数据；
根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态，若所述目标数据的标记字段的状态由待处理成功修改为处理中，控制所述第二数据库将所述目标数据发送至所述第一数据库；
若所述第一数据库成功接收到所述目标数据，则控制所述第一数据库将表示所述第一数据库成功接收到所述目标数据的响应消息发送至所述第二数据库；
若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致；若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致。
第二方面，本发明实施例提供了一种数据一致性的检验装置，包括：
控制模块，用于当检测到第二数据库被存入目标数据时，控制第一数据库向所述第二数据库发送数据获取指令；其中，所述数据获取指令用于获取所述目标数据；
修改模块，用于根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态，若所述目标数据的标记字段的状态由待处理成功修改为处理中，控制所述第二数据库将所述目标数据发送至所述第一数据库；
控制模块，还用于若所述第一数据库成功接收到所述目标数据，则控制所述第一数据库将表示所述第一数据库成功接收到所述目标数据的响应消息发送至所述第二数据库；
判定模块，用于若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致；若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致。
第三方面，本发明实施例还提供了一种服务器，该服务器包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明实施例中的任一种所述的数据一致性的检验方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明实施例中的任一种所述的数据一致性的检验。
本发明实施例通过控制第一数据库向第二数据库发送数据获取指令，用于获取目标数据；并根据数据获取指令将目标数据的标记字段的状态由待处理成功修改为处理中，控制第二数据库将目标数据发送至第一数据库；在第一数据库成功接收到目标数据后，控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库；根据第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，判断第一数据库和第二数据库的数据一致性。本发明实施例通过给目标数据增加一致性状态字段，并按照目标数据的传输过程实时修改目标数据的标记字段的状态，从而有效检测出第一数据库与第二数据库在传输过程中的数据一致性。
附图说明
图1是本发明实施例一中的数据一致性的检验方法的流程示意图；
图2是本发明实施例二中的数据一致性的检验方法的流程示意图；
图3是本发明实施例三中的数据一致性的检验装置的流程示意图；
图4是本发明实施例四中的服务器的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一中的数据一致性的检验方法的流程示意图。本实施例可适用于通过给目标数据的标记字段增加状态字段，以检验第一数据库和第二数据库中往来数据是否一致的情况。本实施例方法可由数据一致性的检验装置来执行，该装置可采用硬件/或软件的方式来实现，并可配置于服务器中，可实现本申请任意实施例所述的数据一致性的检验方法。如图1所示，该方法具体包括如下：
S110、当检测到第二数据库被存入目标数据时，控制第一数据库向第二数据库发送数据获取指令；其中，数据获取指令用于获取目标数据。
在本实施例中，数据的传输采用的是报文格式，如果数据所占容量较少时，例如是10MB之内，则采用报文的形式对该数据进行传输；如果数据所占容量较大时，例如超过10MB，则将该数据打包成一个文件，采用报文文件的形式实现数据的有效传输。示例性的，SWIFT报文平台子系统是用来处理SWIFT报文传输的，通常报文在传输过程中包含四种情况：接收SWIFT Fin报文、接收SWIFT Fileact报文文件、发送SWIFT Fin报文和发送SWIFTFileact报文文件。
具体的，第一数据库和第二数据库均是用来存储并传输数据的；例如，可以用来存储银行系统内部的业务数据，或者银行系统和外部系统之间的交易数据，并实现银行系统内部业务数据的传输，或者银行系统与外部系统之间的交易数据的传输。其中，当数据采用报文形式进行传输时，第二数据库可以是消息队列(MQ)，第一数据库可以选用具有高可用性的Oracle数据库；当数据采用报文文件形式进行传输时，第二数据库可以选用SFTP服务器来代替，第一数据库可以选用具有高可用性的Oracle数据库。其中，本实施例中的第一数据库和第二数据库能够基于不同的传输方向进行互换；当接收数据时，以Oracle数据库消息队列进行示例说明，当检测到第二数据库被存入目标数据，此时，第二数据库为MQ，是用于将接收到的新数据传输至第一数据库，即Oracle数据库，那么，第一数据库(Oracle数据库)是用来接收第二数据库(MQ)传输的目标数据；当发送数据，此时，第二数据库即为Oracle数据库，第一数据库即为MQ，当检测到第二数据库被存入目标数据时，那么，第二数据库(Oracle数据库)是用来向第一数据库(MQ)发送目标数据。
S120、根据数据获取指令控制第二数据库修改目标数据的标记字段的状态，若目标数据的标记字段的状态由待处理成功修改为处理中，控制第二数据库将目标数据发送至第一数据库。
在本实施例中，在第二数据库来报登记簿表中增加一致性状态字段，用来标识目标数据处理的当前状态，因此，在目标数据传输的每个阶段，都需要对目标数据的标记字段的状态进行及时修改，以保证目标数据的标记字段的当前状态能够与该目标数据的当前传输结果相匹配，从而有效实现第一数据库和第二数据库的数据一致性。其中，修改目标数据的标记字段的状态可以根据主键(来报登记簿表中表示每一行数据的不同的标记)更新一个字段，来实现目标数据的标记字段的状态的高效修改。
在控制第二数据库将目标数据发送至第一数据库之后，需要判断第一数据库是否接收到第二数据库发送的目标数据；若第一数据库成功接收到目标数据，则控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库，即S130；若第一数据库未成功接收到目标数据，则表示在传输过程中，目标数据发生丢失现象，则控制第一数据库将表示第一数据库未成功接收到目标数据的响应消息发送至第二数据库，及时发出预警提示，通知管理人员进行问题排查，并控制第二数据库将目标数据的标记字段的状态由待处理修改为数据失效，即表示第二数据库中已不存在该目标数据。
S130、若第一数据库成功接收到目标数据，则控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库。
在本实施例中，在第一数据库成功接收到目标数据后，为了保证第二数据库能够及时准确的对目标数据的标记字段的状态进行修改，第一数据库需要向第二数据库发送回执消息，即表示自己是否接收到目标数据。通过这种方式，能够使得服务器及时检测到目标数据的标记字段的状态信息，有利于实时维护系统内部的业务稳定；尤其当传输的数据涉及到资金时，能够有效避免由于消息重复处理时导致的欠款无法追回的问题。
S140、若第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库一致；若第二数据库未接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库不一致。
在本实施例中，当第二数据库接收到表示第一数据库成功接收到目标数据的响应消息时，表示交易正常，第一数据库和第二数据库之间的交易过程与交易完成后各自存储的数据是匹配的；当第二数据库未接收到表示第一数据库成功接收到目标数据的响应消息时，系统会及时报错，表示交易失败，那么第一数据库和第二数据库之间的交易过程与交易完成后各自存储的数据不匹配的；通过给目标数据增加一致性状态字段，并按照目标数据的传输过程实时修改目标数据的标记字段的状态，从而有效检测出第一数据库与第二数据库在传输过程中的数据一致性。
本发明实施例通过控制第一数据库向第二数据库发送数据获取指令，用于获取目标数据；并根据数据获取指令将目标数据的标记字段的状态由待处理成功修改为处理中，控制第二数据库将目标数据发送至第一数据库；在第一数据库成功接收到目标数据后，控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库；根据第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，判断第一数据库和第二数据库的数据一致性。本发明实施例通过给目标数据增加一致性状态字段，并按照目标数据的传输过程实时修改目标数据的标记字段的状态，从而有效检测出第一数据库与第二数据库在传输过程中的数据一致性。
实施例二
图2是本发明实施例二中的数据一致性的检验方法的流程示意图。本实施例是在上述实施例的基础上进一步扩展与优化，并可与上述技术方案中任意可选方案组合。如图2所示，该方法包括：
S210、当检测到第二数据库被存入目标数据时，控制第一数据库向第二数据库发送数据获取指令；其中，数据获取指令用于获取目标数据。
S220、根据数据获取指令控制第二数据库修改目标数据的标记字段的状态，若目标数据的标记字段的状态由待处理成功修改为处理中，控制第二数据库将目标数据的标记字段的状态由待处理修改为处理中的消息发送至第一数据库。
在本实施例中，将目标数据的标记字段的状态由待处理修改为处理中的修改信息及时反馈至第一数据库，是为了给第一数据库发送的数据获取指令一个响应，即第二数据库已成功接收到第二数据库发送的数据获取指令。通过将第二数据库对于目标数据传输的当前状态反馈至第一数据库，有利于第一数据库根据第二数据库反馈的目标数据传输的当前状态，及时作出后续处理。
若第一数据库成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息，则控制第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库，控制第二数据库将目标数据发送至第一数据库，即S230；若第一数据库未成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息，则控制第一数据库将未成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库；控制第二数据库将目标数据的标记字段保持待处理状态，即执行回滚操作，取消第一数据库获取第二数据库中目标数据的动作。
S230、若第一数据库成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息，则控制第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库，控制第二数据库将目标数据发送至第一数据库。
在本实施例中，只有第二数据库接收到第一数据库返回的表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息，才能将目标数据发送至第一数据库；能够实现消息数据传输过程中的连接性，即第一数据库与第二数据库在发送消息的时候，均是有条件限制的，从而使得服务器根据第二数据库接收到的第一数据库的反馈信息，控制第二数据库将目标数据发送至第一数据库。
S240、若第一数据库成功接收到目标数据，则控制第一数据库将表示第一数据库成功接收到目标数据的响应消息发送至第二数据库。
S250、若第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库一致；若第二数据库未接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库不一致。
可选的，在根据数据获取指令控制第二数据库修改目标数据的标记字段的状态之后，还包括：
若目标数据的标记字段的状态由待处理未成功修改为处理中，则将目标数据的标记字段的状态记录至补偿表中，用于在预设时段后控制第二数据库将目标数据的标记字段的状态由待处理成功修改为处理中。
在本实施例中，当首次执行将目标数据的标记字段的状态由待处理修改为处理中的操作时，如果操作失败，那么，继续执行该操作时，会大概率失败；因此，需要将目标数据的标记字段的状态记录至补偿表中，服务器会建立定时扫描任务，在预设时段后重新执行修改操作，例如两分钟后，重新将目标数据的标记字段的状态由待处理未成功修改为处理中，此时，修改成功的概率会大大提高。
具体的，若对补偿表中保存的目标数据的标记字段的状态执行修改操作时，出现修改失败的情况，则继续执行修改操作，直至修改次数达到预设阈值(例如50次)，则打印告警关键字日志，并进行告警提示。以解决对补偿表中的目标数据的标记字段的状态进行无限次修改导致服务器资源消耗较大的问题；并通过发出告警提示至相关的工作人员，利用人工操作来解决修改不成功的问题。
可选的，若第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库一致，包括：
若第二数据库接收到表示第一数据库成功接收到目标数据的响应消息，则控制第二数据库将目标数据的标记字段的状态由处理中修改为已完成。
相应的，若第二数据库未接收到表示第一数据库成功接收到目标数据的响应消息，则判定第一数据库和第二数据库不一致，包括：
若第二数据库未接收到表示第一数据库成功接收到目标数据的响应消息，则控制第二数据库将目标数据的标记字段的状态由处理中修改为处理失败。
在本实施例中，根据第二数据库是否接收到表示第一数据库成功接收到目标数据的响应消息，对目标数据的标记字段的状态进行修改；其中，目标数据的标记字段的状态为已完成时，表示第一数据库接收第二数据库中目标数据的传输过程是成功的；目标数据的标记字段的状态为处理失败时，表示第一数据库接收第二数据库中目标数据的传输过程是失败的，证明第一数据库和第二数据库在传输目标数据的过程与第二数据库中目标数据的标记字段的当前状态不匹配。
本发明实施例能够在目标数据的传输过程中，根据第二数据库接收到的第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息，控制第二数据库将目标数据发送至第一数据库，降低了目标数据在传输过程中的出错率。
实施例三
图3是本发明实施例三中的数据一致性的检验装置的流程示意图，本实施例可适用于通过给目标数据的标记字段增加状态字段，以检验第一数据库和第二数据库中往来数据是否一致的情况。该装置配置于服务器中，可实现本申请任意实施例所述的数据一致性的检验方法。该装置具体包括如下：
控制模块310，用于当检测到第二数据库被存入目标数据时，控制第一数据库向所述第二数据库发送数据获取指令；其中，所述数据获取指令用于获取所述目标数据；
修改模块320，用于根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态，若所述目标数据的标记字段的状态由待处理成功修改为处理中，控制所述第二数据库将所述目标数据发送至所述第一数据库；
控制模块310，还用于若所述第一数据库成功接收到所述目标数据，则控制所述第一数据库将表示所述第一数据库成功接收到所述目标数据的响应消息发送至所述第二数据库；
判定模块330，用于若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致；若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致。
可选的，控制模块310，还用于控制所述第二数据库将所述目标数据的标记字段的状态由待处理修改为处理中的消息发送至第一数据库；
控制模块310，还用于若所述第一数据库成功接收到所述目标数据的标记字段的状态由待处理修改为处理中的消息，则控制所述第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库。
可选的，所述装置还包括：
记录模块，用于若所述目标数据的标记字段的状态由待处理未成功修改为处理中，则将所述目标数据的标记字段的状态记录至补偿表中，用于在预设时段后控制所述第二数据库将目标数据的标记字段的状态由待处理成功修改为处理中。
可选的，判定模块330，具体用于：
若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则控制所述第二数据库将所述目标数据的标记字段的状态由处理中修改为已完成。
可选的，判定模块330，具体用于：
若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则控制所述第二数据库将所述目标数据的标记字段的状态由处理中修改为处理失败。
通过本发明实施例三的数据一致性的检验装置，通过给目标数据增加一致性状态字段，并按照目标数据的传输过程实时修改目标数据的标记字段的状态，从而有效检测出第一数据库与第二数据库在传输过程中的数据一致性。
本发明实施例所提供的数据一致性的检验装置可执行本发明任意实施例所提供的数据一致性的检验方法，具备执行方法相应的功能模块和有益效果。
实施例四
图4是本发明实施例四中的服务器的结构示意图，如图4所示，该服务器包括处理器410、存储器420、输入装置430和输出装置440；服务器中处理器410的数量可以是一个或多个，图4中以一个处理器410为例；服务器中的处理器410、存储器420、输入装置430和输出装置440可以通过总线或其他方式连接，图4中以通过总线连接为例。
存储器420作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的数据一致性的检验方法对应的程序指令/模块。处理器410通过运行存储在存储器420中的软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现本发明实施例所提供的数据一致性的检验方法。
存储器420可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器420可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器420可进一步包括相对于处理器410远程设置的存储器，这些远程存储器可以通过网络连接至服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可用于接收输入的数字或字符信息，以及产生与服务器的用户设置以及功能控制有关的键信号输入，可以包括键盘、鼠标等。输出装置440可包括显示屏等显示设备。
实施例五
本实施例提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于实现本发明实施例所提供的数据一致性的检验方法。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的数据一致性的检验方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述搜索装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (7)
1.一种数据一致性的检验方法，其特征在于，所述方法包括：
当检测到第二数据库被存入目标数据时，控制第一数据库向所述第二数据库发送数据获取指令；其中，所述数据获取指令用于获取所述目标数据；
根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态，若所述目标数据的标记字段的状态由待处理成功修改为处理中，控制所述第二数据库将所述目标数据发送至所述第一数据库；
若所述第一数据库成功接收到所述目标数据，则控制所述第一数据库将表示所述第一数据库成功接收到所述目标数据的响应消息发送至所述第二数据库；
若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致；若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致；
其中，在若目标数据的标记字段的状态由待处理成功修改为处理中之后，在所述控制所述第二数据库将所述目标数据发送至所述第一数据库之前，所述方法还包括：
控制所述第二数据库将所述目标数据的标记字段的状态由待处理修改为处理中的消息发送至第一数据库；
若所述第一数据库成功接收到所述目标数据的标记字段的状态由待处理修改为处理中的消息，则控制所述第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库；
若所述第一数据库未成功接收到所述目标数据的标记字段的状态由待处理修改为处理中的消息，则控制所述第一数据库将未成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至所述第二数据库，以使所述第二数据库将所述目标数据的标记字段保持待处理状态，取消所述第一数据库获取所述第二数据库中目标数据的动作；
其中，在所述根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态之后，所述方法还包括：
若所述目标数据的标记字段的状态由待处理未成功修改为处理中，则将所述目标数据的标记字段的状态记录至补偿表中，用于在预设时段后控制所述第二数据库将目标数据的标记字段的状态由待处理成功修改为处理中；
若所述补偿表中目标数据的标记字段的状态由待处理修改为处理中的过程中，出现未修改成功的情况，则会继续执行对该目标数据的标记字段的状态由待处理修改为处理中的操作，直至修改次数到达预设次数阈值后，打印告警关键字日志，并进行告警提示。
2.根据权利要求1所述的方法，其特征在于，所述若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致，包括：
若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则控制所述第二数据库将所述目标数据的标记字段的状态由处理中修改为已完成。
3.根据权利要求1所述的方法，其特征在于，所述若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致，包括：
若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则控制所述第二数据库将所述目标数据的标记字段的状态由处理中修改为处理失败。
4.一种数据一致性的检验装置，其特征在于，所述装置包括：
控制模块，用于当检测到第二数据库被存入目标数据时，控制第一数据库向所述第二数据库发送数据获取指令；其中，所述数据获取指令用于获取所述目标数据；
修改模块，用于根据所述数据获取指令控制所述第二数据库修改目标数据的标记字段的状态，若所述目标数据的标记字段的状态由待处理成功修改为处理中，控制所述第二数据库将所述目标数据发送至所述第一数据库；其中，在若目标数据的标记字段的状态由待处理成功修改为处理中之后，在所述控制所述第二数据库将所述目标数据发送至所述第一数据库之前，还包括：控制所述第二数据库将所述目标数据的标记字段的状态由待处理修改为处理中的消息发送至第一数据库；若所述第一数据库成功接收到所述目标数据的标记字段的状态由待处理修改为处理中的消息，则控制所述第一数据库将表示成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至第二数据库；若所述第一数据库未成功接收到所述目标数据的标记字段的状态由待处理修改为处理中的消息，则控制所述第一数据库将未成功接收到目标数据的标记字段的状态由待处理修改为处理中的消息的响应消息发送至所述第二数据库，以使所述第二数据库将所述目标数据的标记字段保持待处理状态，取消所述第一数据库获取所述第二数据库中目标数据的动作；
控制模块，还用于若所述第一数据库成功接收到所述目标数据，则控制所述第一数据库将表示所述第一数据库成功接收到所述目标数据的响应消息发送至所述第二数据库；
判定模块，用于若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库一致；若所述第二数据库未接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则判定所述第一数据库和所述第二数据库不一致；
记录模块，用于若所述目标数据的标记字段的状态由待处理未成功修改为处理中，则将所述目标数据的标记字段的状态记录至补偿表中，用于在预设时段后控制所述第二数据库将目标数据的标记字段的状态由待处理成功修改为处理中；
告警模块，用于若所述补偿表中目标数据的标记字段的状态由待处理修改为处理中的过程中，出现未修改成功的情况，则会继续执行对该目标数据的标记字段的状态由待处理修改为处理中的操作，直至修改次数到达预设次数阈值后，打印告警关键字日志，并进行告警提示。
5.根据权利要求4所述的装置，其特征在于，所述判定模块，具体用于：
若所述第二数据库接收到所述表示所述第一数据库成功接收到所述目标数据的响应消息，则控制所述第二数据库将所述目标数据的标记字段的状态由处理中修改为已完成。
6.一种服务器，其特征在于，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1～3中任一所述的数据一致性的检验方法。
7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1～3中任一所述的数据一致性的检验方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010242519.6A CN111367934B (zh) | 2020-03-31 | 2020-03-31 | 数据一致性的检验方法、装置、服务器和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010242519.6A CN111367934B (zh) | 2020-03-31 | 2020-03-31 | 数据一致性的检验方法、装置、服务器和介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111367934A CN111367934A (zh) | 2020-07-03 |
| CN111367934B true CN111367934B (zh) | 2023-10-31 |
Family
ID=71209288
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010242519.6A Active CN111367934B (zh) | 2020-03-31 | 2020-03-31 | 数据一致性的检验方法、装置、服务器和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111367934B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112000733A (zh) * | 2020-07-17 | 2020-11-27 | 杭州海康威视数字技术股份有限公司 | 图数据存储的方法和装置 |
| CN112612533B (zh) * | 2020-12-03 | 2024-02-09 | 山东云海国创云计算装备产业创新中心有限公司 | ARM服务器中基于CentOS的BMC setup选项修改方法 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102685257A (zh) * | 2012-06-11 | 2012-09-19 | 深圳中兴网信科技有限公司 | 数据同步处理系统、数据同步处理方法、服务器系统 |
| CN103077242A (zh) * | 2013-01-11 | 2013-05-01 | 北京佳讯飞鸿电气股份有限公司 | 一种实现数据库服务器双机热备的方法 |
| CN103888378A (zh) * | 2014-04-09 | 2014-06-25 | 北京京东尚科信息技术有限公司 | 一种基于缓存机制的数据交换系统和方法 |
| CN107590207A (zh) * | 2017-08-24 | 2018-01-16 | 阿里巴巴集团控股有限公司 | 数据同步方法及装置、电子设备 |
| CN108932295A (zh) * | 2018-05-31 | 2018-12-04 | 康键信息技术（深圳）有限公司 | 主数据库切换控制方法、装置、计算机设备和存储介质 |
| CN109582731A (zh) * | 2018-10-18 | 2019-04-05 | 恒峰信息技术有限公司 | 一种数据实时同步方法及系统 |
| CN110377602A (zh) * | 2019-06-27 | 2019-10-25 | 广州市正盟计算机科技有限公司 | 一种数据同步方法、系统和存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10795910B2 (en) * | 2013-12-31 | 2020-10-06 | Sybase, Inc. | Robust communication system for guaranteed message sequencing with the detection of duplicate senders |
-
2020
- 2020-03-31 CN CN202010242519.6A patent/CN111367934B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102685257A (zh) * | 2012-06-11 | 2012-09-19 | 深圳中兴网信科技有限公司 | 数据同步处理系统、数据同步处理方法、服务器系统 |
| CN103077242A (zh) * | 2013-01-11 | 2013-05-01 | 北京佳讯飞鸿电气股份有限公司 | 一种实现数据库服务器双机热备的方法 |
| CN103888378A (zh) * | 2014-04-09 | 2014-06-25 | 北京京东尚科信息技术有限公司 | 一种基于缓存机制的数据交换系统和方法 |
| CN107590207A (zh) * | 2017-08-24 | 2018-01-16 | 阿里巴巴集团控股有限公司 | 数据同步方法及装置、电子设备 |
| CN108932295A (zh) * | 2018-05-31 | 2018-12-04 | 康键信息技术（深圳）有限公司 | 主数据库切换控制方法、装置、计算机设备和存储介质 |
| CN109582731A (zh) * | 2018-10-18 | 2019-04-05 | 恒峰信息技术有限公司 | 一种数据实时同步方法及系统 |
| CN110377602A (zh) * | 2019-06-27 | 2019-10-25 | 广州市正盟计算机科技有限公司 | 一种数据同步方法、系统和存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 王兆青.《计算机网络》.中央广播电视大学出版社,2015,46-47. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111367934A (zh) | 2020-07-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108900353B (zh) | 故障告警方法及终端设备 | |
| US11625315B2 (en) | Software regression recovery via automated detection of problem change lists | |
| CN111367934B (zh) | 数据一致性的检验方法、装置、服务器和介质 | |
| US11551085B2 (en) | Method, device, and computer program product for error evaluation | |
| CN114328132A (zh) | 外部数据源的状态监控方法、装置、设备和介质 | |
| CN104951306A (zh) | 基于实时计算框架的数据处理方法和系统 | |
| US11720461B2 (en) | Automated detection of code regressions from time-series data | |
| US20220092224A1 (en) | Data management system with tamper-evidence | |
| CN109299124B (zh) | 用于更新模型的方法和装置 | |
| CN109254977A (zh) | 数据生成方法、大数据风控平台及计算机存储介质 | |
| CN112765188B (zh) | 配置信息处理方法、配置管理系统、电子设备及存储介质 | |
| CN110188008B (zh) | 作业调度主备切换方法、装置、计算机设备及存储介质 | |
| CN113835780A (zh) | 一种事件响应方法及装置 | |
| CN112596867A (zh) | 一种悬挂事务处理方法及一种分布式数据库系统 | |
| CN109034768B (zh) | 财务调拨方法、装置、计算机设备和存储介质 | |
| US10885014B2 (en) | Assigning monitoring responsibilities in distributed systems using optimistic concurrency | |
| CN111581446B (zh) | 一种图关系生成方法、装置、系统、设备及存储介质 | |
| US11513862B2 (en) | System and method for state management of devices | |
| US20240193606A1 (en) | Control of network systems for automatic assessment and remediation of processing anomalies | |
| CN114327956A (zh) | 车载应用的请求处理方法、装置、电子设备和存储介质 | |
| CN116414833A (zh) | 一种报表数据查询方法、装置、设备及介质 | |
| CN117350689A (zh) | 消息通知方法、装置、计算机设备和存储介质 | |
| CN115756575A (zh) | 一种提交记录获取方法、装置、设备及存储介质 | |
| CN114881792A (zh) | 交易处理方法、装置、设备、介质和程序产品 | |
| CN117520299A (zh) | 金融系统迁移时的数据处理方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20220919 Address after: 25 Financial Street, Xicheng District, Beijing 100033 Applicant after: CHINA CONSTRUCTION BANK Corp. Address before: 25 Financial Street, Xicheng District, Beijing 100033 Applicant before: CHINA CONSTRUCTION BANK Corp. Applicant before: Jianxin Financial Science and Technology Co.,Ltd. |
|
| TA01 | Transfer of patent application right | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |