CN109189864B - 一种数据同步延时的确定方法、装置和设备 - Google Patents

一种数据同步延时的确定方法、装置和设备 Download PDF

Info

Publication number
CN109189864B
CN109189864B CN201810901519.5A CN201810901519A CN109189864B CN 109189864 B CN109189864 B CN 109189864B CN 201810901519 A CN201810901519 A CN 201810901519A CN 109189864 B CN109189864 B CN 109189864B
Authority
CN
China
Prior art keywords
test data
database
target database
time
writing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810901519.5A
Other languages
English (en)
Other versions
CN109189864A (zh
Inventor
李洪鹏
王大鹏
阳淦婷
周咏来
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Union Mobile Pay Electronic Commerce Co ltd
Original Assignee
Union Mobile Pay Electronic Commerce Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Union Mobile Pay Electronic Commerce Co ltd filed Critical Union Mobile Pay Electronic Commerce Co ltd
Priority to CN201810901519.5A priority Critical patent/CN109189864B/zh
Publication of CN109189864A publication Critical patent/CN109189864A/zh
Application granted granted Critical
Publication of CN109189864B publication Critical patent/CN109189864B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据同步延迟的确定方法、装置和设备,所述方法包括:服务器向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;所述服务器将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;所述服务器从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;所述服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间。

Description

一种数据同步延时的确定方法、装置和设备
技术领域
本发明涉及数据处理技术领域,尤其涉及一种数据同步方法、装置和设备。
背景技术
随着互联网的发展,由于单一数据库处理能力有限,单一数据库越来越不能满足业务的需求。通常,为提高高并发的处理能力,可以将数据库拆分成多个数据库,同时,多个数据库之间进行数据同步。然而,不同数据库之间的数据同步,存在一定延时;对于实时交易等场景,数据的延时会对业务造成一定影响,因此,需要及时的确定多个数据库中数据同步的延时,并根据延时大小,对数据库进行适时的调整,进而优化业务能力。
现有技术中,确定数据库的同步延迟的方法,需要在源数据库和目标数据库对应的服务器部署应用,可维护性不高,并且需要在源数据库和目标数据库中分别查找,效率不高。
因此,如何实现数据库的数据同步延时的快速测量是目前亟待解决的技术问题。
发明内容
本发明实施例提供一种数据同步延时的确定方法、装置和设备,用以实现数据同步延时的准确测量,以对数据库的应用进行优化。
本发明实施例提供一种数据同步延迟的确定方法,包括:
服务器向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;
所述服务器将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;
所述服务器从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;
所述服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间。
本发明实施例提供的数据同步延时的确定方法,通过在源数据库中插入测试数据,进而可以直接确定源数据库插入测试数据的写入时间,进而在目标数据库中查找到所述测试数据的写入时间,即可确定所述数据的同步延迟时间。不需要针对同步延迟在不同的业务系统的服务器中部署应用,降低了检测的复杂度,有效的提高了同步延迟的检测的兼容性,降低了实现难度,在不影响数据库性能的同时,提高了同步延迟的检测的效率。
本发明实施例中,使用主动插入测试数据的方式,确定数据同步延时,不用部署在数据库的服务器上,降低维护要求;数据同步延时的确定不受数据库类型影响,在变化数据库后,数据同步延时的确定装置不需要随之调整,提高了数据同步延时的确定方法的可适用范围。
一种可能的实现方式,所述服务器从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间,包括:
所述服务器根据所述测试数据对应的配置文件,确定所述测试数据同步至所述目标数据库的测试数据表;所述配置文件用于提供同步服务;
所述服务器从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
一种可能的实现方式,所述服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间,包括:
所述服务器将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
通过上述方法,直接在测试数据表中确定目标数据库的同步延时,不影响数据库中其他数据库表的读写。而且,不需要针对每个业务对应的不同数据库建立新的应用确定数据库的同步延迟,部署简单,测试效率较高。
一种可能的实现方式,所述方法还包括:
所述服务器获取所述目标数据库的所述延迟时间;
所述服务器根据所述延迟时间,确定所述目标数据库的应用类型。
根据业务系统的不同需要,可以根据确定的同步延时,根据数据的实时性的需求,将数据同步至不同的数据库中。通过上述方法,可以将同步延迟小的目标数据库,作为查询实时交易的数据库表,而不再需要在源数据库中进行查询,避免了多方查询源数据库对源数据库的性能的影响,提高源数据库的高可用性。
本发明实施例提供一种数据同步延迟的确定装置,包括:
收发单元,用于向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;
处理单元,用于将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间。
一种可能的实现方式,所述处理单元,具体用于:
根据所述测试数据对应的配置文件,确定所述测试数据同步至所述目标数据库的测试数据表;所述配置文件用于提供同步服务;从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
一种可能的实现方式,所述处理单元,具体用于:
将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
一种可能的实现方式,所述处理单元,还用于:
获取所述目标数据库的所述延迟时间;根据所述延迟时间,确定所述目标数据库的应用类型。
本发明实施例提供一种计算机存储介质,存储有计算机可执行指令,所述计算机可执行指令用于执行如本发明实施例所述的方法。
本发明实施例提供一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;
其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如本发明实施例所述的方法。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明实施例提供的数据同步延时的确定方法的流程示意图;
图2为本发明实施例提供的数据同步延时的确定方法的示意图;
图3为本发明实施例提供的数据同步延时的确定装置的结构示意图;
图4为本发明实施例提供的实施数据同步延时的确定方法的电子设备的硬件结构示意图。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明,并且在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
随着互联网的发展,由于单一数据库处理能力有限,对数据库操作并发越来越大,单一数据库越来越不能满足业务的需求。例如,电子商务日益深入人心,实时交易系统的数据量也与日俱增,然而单一数据库的处理能力有限,因此需要基于源数据库,建立多个目标数据库,通过读写分离,从而降低对源数据库的访问压力,降低数据库处理压力,提高数据库处理能力。
当源数据库中的某个数据表发生变化时,需要保证关注该数据表的目标数据库中的该数据表与源数据库中的该数据表发生一致的变化,因此需要一个同步装置来实现目标数据库与源数据库之间数据的同步。
需要说明的是,本发明实施例提供的数据同步延时的确定方法,可以应用到提供同步服务的设备中,本发明实施例提供的配置文件存储于所述设备中,然后由所述设备将数据分别同步到待同步的目标数据库中。
本发明的实施例所应用的场景有多种,为更好的理解本方案,此处仅示例性列举以下几种:
场景一:源数据库为一个,目标数据库为多个,该源数据库为“写库”,支持相关写操作的事务处理,目标数据库为“读库”,支持业务查询、数据分析等查询操作。实际应用中,需保证该为“写库”的源数据库内容与多个为“读库”的目标数据库的数据内容一致,并需保证目标数据库的内容和源数据库内容同步的及时性和正确性。
场景二:源数据库为多个,目标数据库为一个,该多个源数据库为“写库”,且多个源数据库中储存的数据表均为“订单表”,此时,可将一部分用户的交易写到某个源数据库的“订单表”中,而将另一部分用户的交易写入到另一个源数据库的“订单表”中,此时,即多个源数据库中存储同一个数据表“订单表”,而不同源数据库中储存的数据内容不同。目标数据库为“读库”。实际应用中需实现将多个源数据库中的“订单表”的不同数据内容整合至一个目标数据库中,以便于通过该目标数据库可读取所有“订单表”的数据内容。
场景二中,也可设置多个目标数据库,分别将多个源数据库中的“订单表”同步至多个目标数据库中,以减少单个目标数据库的查询负荷量。
场景三:源数据库为多个,目标数据库为多个,该多个源数据库为“写库”,且多个源数据库中储存的数据表均为同一个数据表,例如“订单表”,多个源数据库中存储同一个数据表“订单表”,而不同源数据库中储存的数据内容不同。具体可为,源数据库按商户维度来区分,商户一的订单表信息通过一个源数据库储存,而商户二的订单表信息通过另一个源数据库储存。多个目标数据库均为“读库”。实际应用中可将以商户为维度区分的多个源数据库中的“订单表”的不同数据内容整合至以时间为维度的多个目标数据库中,即,可将一月份的所有商户的订单表整合至一个目标数据库中,将二月份的所有商户的订单表整合至另一个目标数据库中,以便于通过该目标数据库可读取所有“订单表”的数据内容。
场景四:本发明实施例中的至少一个目标数据库储存单个源数据库储存的全部数据表中的部分数据表。该单个目标数据库中也可储存有多个源数据库中每个源数据库中储存的部分数据表。举个例子,源数据库一中储存有数据表“一月份统计表、二月份统计表”,源数据库二中储存有数据表“三月份统计表、四月份统计表”,目标数据库中可仅存储源数据库一中的数据表“一月份统计表”,也可仅存储有源数据库一中的“一月份统计表”和源数据库二中的“三月份统计表”。
在上述应用场景中,可以将不对数据库进行写操作的服务器,即仅执行查询操作的服务器直接在目标数据库中进行查询,因此,对目标数据库的时效性提出了要求。然而,不同数据库之间的数据同步,可能由于多种原因导致延时;对于实时交易等场景,数据的延时会对业务造成一定影响,在日常同步过程中,经常会出现网络问题、大事务、数据库表不同步等原因造成的数据库同步延迟,影响用户体验。因此,需要检测目标数据库与源数据库的数据同步延时,并根据延时大小,访问不同数据库,或做出其他调整。因此,检测数据同步延时,是业务系统运营、维护智能化的关键点。
现有的技术方案中,使用源数据库和目标数据库中插入操作的方式,并针对数据库日志进行单独解析,以获取插入操作的时间,进而确定出源数据库同步至目标数据库的延迟时间,由于需要针对不同类型的数据库日志进行解析,兼容性不够强。另外,直接对数据库日志进行文件操作,需要在服务器上部署应用,可维护性不高。
为解决上述问题,如图1所示,本发明实施例提供一种数据同步延迟的确定方法,包括:
步骤101:服务器向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;
步骤102:服务器将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;
步骤103:服务器从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;
步骤104:服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间。
需要说明的是,本发明实施例中服务器可连接一个源数据库,也可连接多个源数据库,多个源数据库中可存储同一个数据表中的不同数据内容。服务器可连接多个目标数据库,也可每个第一服务器仅连接一个目标数据库。
通过上述方法,通过在源数据库中插入测试数据,进而可以直接确定源数据库插入测试数据的写入时间,进而在目标数据库中查找到所述测试数据的写入时间,即可确定所述数据的同步延迟时间。不需要针对同步延迟在不同的业务系统的服务器中部署应用,降低了检测的复杂度,有效的提高了同步延迟的检测的兼容性,降低了实现难度,在不影响数据库性能的同时,提高了同步延迟的检测的效率。
本发明实施例中,使用主动插入测试数据的方式,确定数据同步延时,不用部署在数据库的服务器上,降低维护要求;数据同步延时的确定不受数据库类型影响,在变化数据库后,数据同步延时的确定装置不需要随之调整,提高了数据同步延时的确定方法的可适用范围。
在步骤101之前,服务器可以在源数据库中创建一个专门用于数据库同步检测的测试数据表,其数据表类型、创建方式可以与源数据库中的数据库表相同,在此不做限定。
在步骤101中,服务器可以定时向源数据库的测试数据表中写入测试数据,并记录插入测试数据的主键。测试数据的主键用于标识该测试数据。
在步骤102的另外一种实现方式中,服务器可以在源数据库中的测试数据表对应的写入数据的日志中,获取每条数据的写入时间。
具体的,可以通过读取源数据库生成的数据库日志,解析出每条测试数据在源数据库的写入时间,作为第一写入时间,该时间可以记为T1。
这种方法,可以将服务器测试数据发送至源数据库损失的时间去掉,记录的第一写入时间,使得确定出的同步延迟时间更加准确。
在步骤103之前,在根据测试数据对应的配置文件,确定对测试数据的同步的目标数据库。在步骤103中,一种可能的实现方式,可以包括以下步骤:
步骤一、服务器根据所述测试数据对应的配置文件,确定所述测试数据同步至所述目标数据库的测试数据表;所述配置文件用于提供同步服务;
步骤二、服务器从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
在步骤一中,服务器可以根据各个待同步的目标数据库在配置文件中写入的属性信息的位置,选定待同步的目标数据库,所述配置文件中包含预先选定的待同步的目标数据库的属性信息、各个待同步的目标数据库中需要同步的数据库表的标识信息。所述属性信息可以但不限于包括:IP地址、用户名、密码和端口等信息。针对任一待同步的目标数据库,在需要对该数据库包含的数据库表进行同步时,需要将这些数据库表的标识信息写入到配置文件中,所述标识信息可以但不限于为数据库表的名称等。
在本发明实施例中,服务器可以在源数据库中数据发生更改变化的时刻就需要获取同步数据,或者是服务器设置定时获取同步数据,例如一天一次获取同步数据,一个星期一次获取同步数据等等。
不同业务系统需要的同步数据可能不同,也可能相同,在进行数据同步前,可以先确定不同的业务类型对应的数据库表的同步规则,在本发明实施例中,不同的业务类型对应的数据库表的同步规则是预先设定好的。不同的业务类型对应的数据库表具有不同的业务标识。
测试数据表可以根据测试的需要,确定其业务类型,以将测试数据表的同步规则,也可以针对测试数据表单独设置同步规则,在此不做限定。
由于各个待同步数据库已同步时间戳不同,且同一待同步数据库中不同数据库表中写入时间也不相同,故在同步时可以根据提取出的各条数据分别对应的写入时间,按照由先到后的顺序将提取出的所有数据进行排序,然后依次进行同步。
在本发明实施例中,提供几种同步数据的方式,第一种为每个待同步的目标数据库对应的服务器通过一个数据同步接口将数据同步到待同步的目标数据库中,在本发明实施例中,在获取同步数据后,将同步数据保存在数据同步接口中,待同步的目标数据库对应的服务器可以通过主动同步的方式在数据同步接口中获取同步数据。
在本发明实施例中,第二种为根据待同步的目标数据库的同步规则,获取同步数据后,将同步数据保存在数据同步数据表中,在同步时间到达时,将数据同步数据表发送给待同步的目标数据库对应的服务器,或者待同步的目标数据库需要进行同步时,获取数据同步数据表,并将数据同步数据表保存在待同步的目标数据库中。
在步骤二中,所述测试数据表可以为在目标数据库中增加的测试数据表。该测试数据表可以与其他数据库表相同,在目标数据库中,每个数据库表中包括时间戳字段和同步状态字段,所述时间戳字段用于表征数据库表中每条数据的写入时间,所述同步状态字段用于表征数据库表中每条数据是否已同步。
具体的,管理任一目标数据库的设备,例如,服务器,可以预先在该目标数据库中新增测试数据表,测试表中包括写入内容,时间戳字段Timestamp,和同步状态字段syncstatus。在向该数据库包含的任一数据库表写入数据时,可以记录写入该数据库的时间,例如,任一数据库表的格式可以参考表1所示:
表1
序号 写入内容 Timestamp syncstatus
1 写入内容1 10:00 1
2 写入内容2 10:05 0
3 写入内容3 10:10 0
4 写入内容4 10:15 0
……
由表1可知,每一个序号所在的行代表一条数据,表1中Timestamp对应的列中代表各条数据写入该数据库表的写入时间;syncstatus表示该数据库表中每条数据的是否已同步,如该数据库表中第1条数据的syncstatus字段取值为“1”,表示第1条数据已同步;第2~4条数据的syncstatus字段取值均为“0”,表示第2~4条数据未同步。
在步骤二中,服务器可以读取目标数据库中的元数据信息,自动的或通过配置文件方式,根据测试数据的主键,可以直接查找到所述测试数据的写入时间的时间戳。
当然,还可以获取测试数据的同步状态,根据同步状态确定测试数据是否已同步。若未同步,可以将服务器至目标数据库对所述测试数据查询的时间作为所述第二写入时间。
在步骤二中,还可以根据目标数据库中测试数据表的数据日志中的测试数据的写入时间确定第二写入时间。
在步骤104中,一种可能的实现方式,服务器将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
本发明实施例中的同步延迟时间检测的精度依赖于服务器至目标数据库轮询的周期。为了避免轮询本身对目标数据库性能造成的压力,可以采用单线程进行轮询。由于使用主键对目标库进行查询,不影响对目标数据库的性能。
当然,针对实时性不高的多个目标数据库,也可以设置为多线程工作方式,以提高轮询效率。
通过上述方法,直接在测试数据表中确定目标数据库的同步延时,不影响数据库中其他数据库表的读写。而且,不需要针对每个业务对应的不同数据库建立新的应用确定数据库的同步延迟,部署简单,测试效率较高。
当然,为进一步优化同步延时的确定,提高检测效率,可以直接获取目标数据库中测试数据表最新的一条测试数据,将最新的一条测试数据T2与T1的时间差,确定为该数据库表的同步延时。
如图2所示,源数据库有测试数据表中的最新记录的测试数据A,第一写入时间为T1。在目标数据库的测试数据表中,确定同步至目标数据库的第二写入时间为T2,因此,目标数据库的同步延时为:(T2-T1)。
源数据库中的测试数据表可以如表2所示:
表2
Figure GDA0002931170540000111
Figure GDA0002931170540000121
目标数据库中的测试数据表可以如表3所示:
表3
序号 主键 Timestamp
1 ACD 20180308120809024412
2 BCF 20180308120809033412
3 EDF 20180308120809053412
4 ERT 20180308120809123412
…… ASD 20180308120809023422
在确定目标数据库的同步延迟之后,可以根据确定的数据库的同步延迟,优化目标数据库。
一种可能的实现方式,所述方法还包括:
步骤一、服务器获取所述目标数据库的所述延迟时间;
步骤二、服务器根据所述延迟时间,确定所述目标数据库的应用类型。
具体的,可以根据业务系统的不同需要,可以根据确定的同步延时,根据数据的实时性的需求,将数据同步至不同的数据库中。通过上述方法,可以将同步延迟小的目标数据库,作为查询实时交易的数据库表,而不再需要在源数据库中进行查询,避免了多方查询源数据库对源数据库的性能的影响,提高源数据库的高可用性。
基于相同的发明构思,如图3所示,本发明实施例提供一种数据同步延迟的确定装置,包括:
收发单元301,用于向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;
处理单元302,用于将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;从目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间。
一种可能的实现方式,处理单元302,具体用于:
根据所述测试数据对应的配置文件,确定所述测试数据同步至所述目标数据库的测试数据表;所述配置文件用于提供同步服务;从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
一种可能的实现方式,处理单元302,具体用于:
将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
一种可能的实现方式,处理单元302,还用于:
获取所述目标数据库的所述延迟时间;根据所述延迟时间,确定所述目标数据库的应用类型。
图4是本发明实施例提供的实施数据库同步延迟的确定方法的电子设备的硬件结构示意图,如图4所示,该电子设备包括:
一个或多个处理器410以及存储器420,图4中以一个处理器410为例。
执行数据同步方法的电子设备还可以包括:输入装置430和输出装置440。
处理器410、存储器420、输入装置430和输出装置440可以通过总线或者其他方式连接,图4中以通过总线连接为例。
存储器420作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本申请实施例中的数据库同步延迟的确定方法对应的程序指令/模块/单元。处理器410通过运行存储在存储器420中的非易失性软件程序、指令以及模块/单元,从而执行服务器或者智能终端的各种功能应用以及数据处理,即实现上述方法实施例数据库同步延迟的确定方法。
存储器420可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据数据同步装置的使用所创建的数据等。此外,存储器420可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器420可选包括相对于处理器410远程设置的存储器,这些远程存储器可以通过网络连接至数据库同步延迟的确定装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可接收输入的数字或字符信息,以及产生与数据库同步延迟的确定装置的用户设置以及功能控制有关的键信号输入。输出装置440可包括显示屏等显示设备。
所述一个或者多个模块存储在所述存储器420中,当被所述一个或者多个处理器410执行时,执行上述任意方法实施例中的数据库同步延迟的确定方法。
上述产品可执行本申请实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请实施例所提供的方法。
本申请实施例提供了一种计算机程序产品,其中,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,其中,当所述程序指令被计算机执行时,使所述计算机执行本申请上述方法实施例中任一项数据库同步延迟的确定方法。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种数据同步延迟的确定方法,其特征在于,包括:
服务器向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;所述服务器根据所述测试数据对应的配置文件,确定所述测试数据同步至目标数据库的测试数据表;所述配置文件用于提供同步服务;
所述服务器将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;
所述服务器从所述目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;
所述服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间;
所述服务器根据所述延迟时间,确定所述目标数据库的应用类型。
2.如权利要求1所述的方法,其特征在于,所述服务器从所述目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间,包括:
所述服务器从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
3.如权利要求1所述的方法,其特征在于,所述服务器根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间,包括:
所述服务器将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
4.一种数据同步延迟的确定装置,其特征在于,包括:
收发单元,用于向源数据库发送测试数据,所述测试数据用于写入源数据库中的测试数据表;
处理单元,用于将发送所述测试数据的时间作为写入所述源数据库的第一写入时间;根据所述测试数据对应的配置文件,确定所述测试数据同步至目标数据库的测试数据表;所述配置文件用于提供同步服务;从所述目标数据库的测试数据表获取所述测试数据写入所述目标数据库的第二写入时间;所述目标数据库为所述源数据库的同步数据库;根据所述第一写入时间和所述第二写入时间,确定所述目标数据库的延迟时间;根据所述延迟时间,确定所述目标数据库的应用类型。
5.如权利要求4所述的装置,其特征在于,所述处理单元,具体用于:
从所述目标数据库的测试数据表中,查找所述测试数据并获取所述测试数据写入所述目标数据库的第二写入时间。
6.如权利要求5所述的装置,其特征在于,所述处理单元,具体用于:
将所述第一写入时间和所述第二写入时间的差,作为所述目标数据库的延迟时间。
7.一种计算机存储介质,存储有计算机可执行指令,其特征在于,所述计算机可执行指令用于执行如权利要求1至3任一权利要求所述的方法。
8.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至3任一权利要求所述的方法。
CN201810901519.5A 2018-08-09 2018-08-09 一种数据同步延时的确定方法、装置和设备 Active CN109189864B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810901519.5A CN109189864B (zh) 2018-08-09 2018-08-09 一种数据同步延时的确定方法、装置和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810901519.5A CN109189864B (zh) 2018-08-09 2018-08-09 一种数据同步延时的确定方法、装置和设备

Publications (2)

Publication Number Publication Date
CN109189864A CN109189864A (zh) 2019-01-11
CN109189864B true CN109189864B (zh) 2021-03-16

Family

ID=64921168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810901519.5A Active CN109189864B (zh) 2018-08-09 2018-08-09 一种数据同步延时的确定方法、装置和设备

Country Status (1)

Country Link
CN (1) CN109189864B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110430091A (zh) * 2019-07-09 2019-11-08 上海易点时空网络有限公司 适用于redis的主从时延监控方法及装置、存储介质
CN115136120A (zh) * 2020-03-26 2022-09-30 深圳市欢太科技有限公司 数据库同步测试方法、装置、计算机设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106682002A (zh) * 2015-11-05 2017-05-17 中兴通讯股份有限公司 数据库同步方法及系统、源数据和目标数据同步装置
CN107402872A (zh) * 2016-03-31 2017-11-28 阿里巴巴集团控股有限公司 一种用于确定数据库间数据同步延迟的方法与设备
CN107766502A (zh) * 2017-10-20 2018-03-06 上海新炬网络信息技术股份有限公司 一种Oracle RAC数据库容灾切换演练方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130123482A (ko) * 2012-05-03 2013-11-13 삼성전자주식회사 데이터 동기화를 위한 타임 스탬프 관리 방법 및 그 단말

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106682002A (zh) * 2015-11-05 2017-05-17 中兴通讯股份有限公司 数据库同步方法及系统、源数据和目标数据同步装置
CN107402872A (zh) * 2016-03-31 2017-11-28 阿里巴巴集团控股有限公司 一种用于确定数据库间数据同步延迟的方法与设备
CN107766502A (zh) * 2017-10-20 2018-03-06 上海新炬网络信息技术股份有限公司 一种Oracle RAC数据库容灾切换演练方法

Also Published As

Publication number Publication date
CN109189864A (zh) 2019-01-11

Similar Documents

Publication Publication Date Title
CN108536752B (zh) 一种数据同步方法、装置和设备
CN110321387B (zh) 数据同步方法、设备及终端设备
CN109241165B (zh) 一种数据库同步延时的确定方法、装置和设备
CN109739929A (zh) 数据同步方法、装置及系统
CN104809201B (zh) 一种数据库同步的方法和装置
CN104809202B (zh) 一种数据库同步的方法和装置
CN107590207B (zh) 数据同步方法及装置、电子设备
CN104703125B (zh) 基于即时通信的信息推荐方法、装置和终端
CN112434043B (zh) 一种数据同步方法、装置、电子设备及介质
CN111339171B (zh) 数据查询的方法、装置及设备
CN110012049B (zh) 信息推送方法. 系统. 服务器及计算机可读存储介质
CN110232095B (zh) 一种数据同步方法、装置、存储介质和服务器
CN103178998A (zh) 一种测控数据传输方法和装置
CN109189864B (zh) 一种数据同步延时的确定方法、装置和设备
CN106874281A (zh) 实现数据库读写分离的方法和装置
CN111382182A (zh) 数据处理方法、装置、电子设备及存储介质
CN104765792B (zh) 一种维度数据存储的方法、装置及系统
CN105847320A (zh) 一种资源获取方法和装置
CN110362478A (zh) 应用升级测试方法、装置、计算机设备和存储介质
CN113626449A (zh) 数据存储、数据查询方法及相关设备
CN105991744A (zh) 用于同步用户应用数据的方法与设备
CN112231324B (zh) 一种实现增量数据比对的系统及方法
CN113297317A (zh) 数据表同步方法、装置、电子设备和存储介质
CN110909072B (zh) 一种数据表建立方法、装置及设备
CN109561126B (zh) 一种数据同步方法和装置、存储介质、处理器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant