CN109828889A - 监控数据库的方法、装置、计算机设备和存储介质 - Google Patents

监控数据库的方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN109828889A
CN109828889A CN201910100437.5A CN201910100437A CN109828889A CN 109828889 A CN109828889 A CN 109828889A CN 201910100437 A CN201910100437 A CN 201910100437A CN 109828889 A CN109828889 A CN 109828889A
Authority
CN
China
Prior art keywords
table structure
target data
data
monitoring
library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910100437.5A
Other languages
English (en)
Inventor
李炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910100437.5A priority Critical patent/CN109828889A/zh
Publication of CN109828889A publication Critical patent/CN109828889A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本申请涉及数据仓库技术领域,特别涉及一种监控数据库的方法、装置、计算机设备和存储介质。所述方法包括:获取目标数据的监控指令,其中目标数据存储于源库;根据监控指令,监控目标数据;根据监控到目标数据的监控信息,判断是否满足读取条件;若判定满足读取条件,读取目标数据的表结构,获得第一表结构;读取目标库中与目标数据对应的数据的表结构,获得第二表结构;将第一表结构与第二表结构进行比较;若第一表结构与第二表结构不一致,则发送通知给指定的接收人。旨在解决未能及时发现源库与目标库不一致的问题。

Description

监控数据库的方法、装置、计算机设备和存储介质
技术领域
本申请涉及数据仓库工具技术领域,特别涉及一种监控数据库的方法、装置、计算机设备和存储介质。
背景技术
目前,ETL(Extract-Transform-Load,数据仓库技术)工具从源库读取数据至目标库,用来描述将数据从来源端经过抽取、交互转换、加载至目的端的过程。由于源库与目标库一般由不同团队负责,同时涉及到表较多,有时会有数据库变动不一致的情况发生,导致系统异常。因此,亟需对数据库进行监控,以及时发现源库与目标库不一致。
申请内容
针对现有技术不足,本申请提出一种监控数据库的方法、装置、计算机设备和存储介质,旨在解决未能及时发现源库与目标库不一致的问题。
本申请提出的技术方案是:
一种监控数据库的方法,所述方法包括:
获取目标数据的监控指令,其中所述目标数据存储于源库;
根据所述监控指令,监控所述目标数据;
根据监控到所述目标数据的监控信息,判断是否满足读取条件;
若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;
读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;
将所述第一表结构与所述第二表结构进行比较;
若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
进一步地,在所述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取当前监控的时长;
判断所述当前监控的时长是否在预设时长范围内;
若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
进一步地,在所述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
从目标数据的修改记录中提取目标数据的修改时间;
判断所述目标数据的修改时间是否在预设时间范围内;
若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
进一步地,在所述获取目标数据的监控指令的步骤中,包括:
接收用户对源库中的数据输入的标签;
将已添加所述标签的数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
进一步地,在所述获取目标数据的监控指令的步骤中,包括:
检测所述源库是否存在新增数据;
若检测出所述源库存在新增数据,则将所述新增数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
进一步地,在所述将所述第一表结构与所述第二表结构进行比较的步骤之后,包括:
若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
进一步地,在所述若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人的步骤之后,包括:
接收用户输入的修改对象;
识别所述修改对象;
当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
将所述第一表结构脚本发送至所述源库中执行;
当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
将所述第二表结构脚本发送至所述源库中执行。
本申请还提供一种监控数据库的装置,所述装置包括:
获取模块,用于获取目标数据的监控指令,其中所述目标数据存储于源库;
监控模块,用于根据所述监控指令,监控所述目标数据;
判断模块,用于根据监控到所述目标数据的监控信息,判断是否满足读取条件;
第一读取模块,用于若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;
第二读取模块,用于读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;
比较模块,用于将所述第一表结构与所述第二表结构进行比较;
发送模块,用于若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
本申请还提供一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述任一项所述的方法的步骤。
本申请还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的方法的步骤。
根据上述的技术方案,本申请有益效果:监控目标数据,读取目标数据的表结构,读取目标库中与目标数据对应的数据的表结构,将两者的表结构进行比较,如果不一致,则发送通知给指定的接收人,以至使接收人及时发现源库与目标库不一致,旨在解决未能及时发现源库与目标库不一致的问题。
附图说明
图1是应用本申请实施例提供的监控数据库的方法的流程图;
图2是应用本申请实施例提供的监控数据库的装置的功能模块图;
图3是应用本申请实施例提供的计算机设备的结构示意框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
如图1所示,本申请实施例提出一种监控数据库的方法,所述方法包括以下步骤:
步骤S101、获取目标数据的监控指令,其中所述目标数据存储于源库。
对源库的数据进行监控,可以是源库的全部数据,也可以是源库的部分数据,在本实施例中,目标数据的监控指令是用户输入的,在用户输入目标数据的监控指令之后,接收目标数据的监控指令,进而获取监控指令。
在一些实施例中,在步骤S101中,包括:
接收用户对源库中的数据输入的标签;
将已添加所述标签的数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
源库将自己的数据进行列表显示,在需要对源库中的某些数据进行监控时,用户在列表中进行对需要监控的数据进行勾选,通过勾选的方式对数据添加标签,接收用户对源库中的数据输入标签,将已添加标签的数据加入待监控列表中,获取需要进行监控的目标数据,在得到目标数据之后,根据目标数据,生成监控该目标数据的监控指令,从而根据待监控列表,获取目标数据的监控指令。
步骤S102、根据所述监控指令,监控所述目标数据。
在获取到目标数据的监控指令之后,对目标数据进行监控,监控的目的是为了在满足读取条件时,读取目标数据的表结构。在本实施例中,通过监控工具对目标数据进行监控,当然,还可以制作监控脚本对目标数据进行监控。
步骤S103、根据监控到所述目标数据的监控信息,判断是否满足读取条件。
在对目标数据监控之后,根据监控到目标数据的监控信息,判断是否满足读取条件,当监控信息满足读取条件,就执行读取动作,当监控信息不满足读取条件时,就不执行读取动作。
在本实施例中,在步骤S103中,包括:
获取当前监控的时长;
判断所述当前监控的时长是否在预设时长范围内;
若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
获取当前监控的时长,将当前监控的时长与预设时长范围进行匹配,根据匹配结果,判断当前监控的时长是否在预设时长范围内,若匹配成功,则判断当前监控的时长在预设时长范围内,若匹配失败,则判断当前监控的时长不在预设时长范围内,若当前监控的时长在预设时长范围内,则判定满足读取条件,若当前监控的时长不在预设时长范围内,则判定不满足读取条件。
预设时长范围可以是一个预设时长范围,也可以是多个预设时长范围,当预设时长范围是多个预设时长范围时,若判断当前监控的时长在多个预设时长范围中任一个预设时长范围内,则判定满足读取条件,若判断当前监控的时长不在多个预设时长范围中任一个预设时长范围内,则判定不满足读取条件。
在一些实施例中,在步骤S103中,包括:
获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
从目标数据的修改记录中提取目标数据的修改时间;
判断所述目标数据的修改时间是否在预设时间范围内;
若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
获取目标数据的修改记录,在获取到目标数据的修改记录之后,对目标数据的修改记录进行判断,目标数据的修改记录包括目标数据的修改时间,从目标数据的修改记录中提取目标数据的修改时间,在提取到目标数据的修改时间之后,判断目标数据的修改时间是否在预设时间范围内,若目标数据的修改时间在预设时间范围内,则判定满足读取条件,若目标数据的修改时间不在预设时间范围内,则判定不满足读取条件。
步骤S104、若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构。
在判定满足读取条件时,执行读取动作,读取目标数据的表结构,获得第一表结构。
步骤S105、读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构。
在读取目标数据的表结构之后,读取目标库中与目标数据对应的数据的表结构,获得第二表结构。如果目标数据还没有同步到目标库中,那么目标数据对应的数据的表结构是一个数据为空的表结构。
在一些实施例中,当读取目标数据的表结构时,同时读取目标库中与目标数据对应的数据的表结构,获得第二表结构。
步骤S106、将所述第一表结构与所述第二表结构进行比较。
在获得第一表结构和第二表结构之后,将第一表结构与第二表结构进行比较,主要是比较第一表结构与第二表结构是否一致,
步骤S107、若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
根据比较结果,判断是否发送通知给指定的接收人,若第一表结构与第二表结构不一致,则发送通知给指定的接收人,若第一表结构与第二表结构一致,则不发送通知给指定的接收人。
在本实施例中,在步骤S107之后,包括:
接收用户输入的修改对象;
识别所述修改对象;
当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
将所述第一表结构脚本发送至所述源库中执行;
当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
将所述第二表结构脚本发送至所述源库中执行。
在接收到通知之后,用户知道源库与目标库存在数据不一致的情况,具体是监控到的目标数据在目标库中不一致,用户需要在源库与目标库之中选择一个作为修改模板修改另一个,用户输入修改对象,接收用户输入的修改对象,对修改对象进行识别,识别修改对象是源库还是目标库,当识别出修改对象为源库时,根据第二表结构,生成修改第一表结构的脚本,获得第一表结构脚本,在获得第一表结构脚本之后,将第一表结构脚本发送至源库中执行,当识别出修改对象为目标库时,根据第一表结构,生成修改第二表结构的脚本,获得第二表结构脚本,将第二表结构脚本发送至源库中执行,进而完成修改。
在一些实施例中,在步骤S101中,包括:
检测所述源库是否存在新增数据;
若检测出所述源库存在新增数据;则将所述新增数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
对应地,在步骤S106之后,包括:
若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
如果第一表结构与第二表结构一致,说明没有必要再对该新增数据进行监控,那么将新增数据从待监控列表中剔除,以及不发送通知给指定的接收人。
综上所述,监控目标数据,读取目标数据的表结构,读取目标库中与目标数据对应的数据的表结构,将两者的表结构进行比较,如果不一致,则发送通知给指定的接收人,以至使接收人及时发现源库与目标库不一致,旨在解决未能及时发现源库与目标库不一致的问题。
如图2所示,本申请实施例提出一种监控数据库的装置1,装置1包括获取模块11、监控模块12、判断模块13、第一读取模块14、第二读取模块15、比较模块16和发送模块17。
获取模块11,用于获取目标数据的监控指令,其中所述目标数据存储于源库。
对源库的数据进行监控,可以是源库的全部数据,也可以是源库的部分数据,在本实施例中,目标数据的监控指令是用户输入的,在用户输入目标数据的监控指令之后,接收目标数据的监控指令,进而获取监控指令。
在一些实施例中,获取模块11包括:
第一子接收模块,用于接收用户对源库中的数据输入的标签;
第一子加入模块,用于将已添加所述标签的数据加入待监控列表中;
第一子获取模块,用于根据所述待监控列表,获取目标数据的监控指令。
源库将自己的数据进行列表显示,在需要对源库中的某些数据进行监控时,用户在列表中进行对需要监控的数据进行勾选,通过勾选的方式对数据添加标签,接收用户对源库中的数据输入标签,将已添加标签的数据加入待监控列表中,获取需要进行监控的目标数据,在得到目标数据之后,根据目标数据,生成监控该目标数据的监控指令,从而根据待监控列表,获取目标数据的监控指令。
监控模块12,用于根据所述监控指令,监控所述目标数据。
在获取到目标数据的监控指令之后,对目标数据进行监控,监控的目的是为了在满足读取条件时,读取目标数据的表结构。在本实施例中,通过监控工具对目标数据进行监控,当然,还可以制作监控脚本对目标数据进行监控。
判断模块13,用于根据监控到所述目标数据的监控信息,判断是否满足读取条件。
在对目标数据监控之后,根据监控到目标数据的监控信息,判断是否满足读取条件,当监控信息满足读取条件,就执行读取动作,当监控信息不满足读取条件时,就不执行读取动作。
在本实施例中,判断模块13包括:
第二子获取模块,用于获取当前监控的时长;
第一子判断模块,用于判断所述当前监控的时长是否在预设时长范围内;
第一子判定模块,用于若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
第二子判定模块,用于若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
获取当前监控的时长,将当前监控的时长与预设时长范围进行匹配,根据匹配结果,判断当前监控的时长是否在预设时长范围内,若匹配成功,则判断当前监控的时长在预设时长范围内,若匹配失败,则判断当前监控的时长不在预设时长范围内,若当前监控的时长在预设时长范围内,则判定满足读取条件,若当前监控的时长不在预设时长范围内,则判定不满足读取条件。
预设时长范围可以是一个预设时长范围,也可以是多个预设时长范围,当预设时长范围是多个预设时长范围时,若判断当前监控的时长在多个预设时长范围中任一个预设时长范围内,则判定满足读取条件,若判断当前监控的时长不在多个预设时长范围中任一个预设时长范围内,则判定不满足读取条件。
在一些实施例中,判断模块13包括:
第三子获取模块,用于获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
第一子提取模块,用于从目标数据的修改记录中提取目标数据的修改时间;
第二子判断模块,用于判断所述目标数据的修改时间是否在预设时间范围内;
第三子判定模块,用于若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
第四子判定模块,用于若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
获取目标数据的修改记录,在获取到目标数据的修改记录之后,对目标数据的修改记录进行判断,目标数据的修改记录包括目标数据的修改时间,从目标数据的修改记录中提取目标数据的修改时间,在提取到目标数据的修改时间之后,判断目标数据的修改时间是否在预设时间范围内,若目标数据的修改时间在预设时间范围内,则判定满足读取条件,若目标数据的修改时间不在预设时间范围内,则判定不满足读取条件。
第一读取模块14,用于若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构。
在判定满足读取条件时,执行读取动作,读取目标数据的表结构,获得第一表结构。
第二读取模块15,用于读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构。
在读取目标数据的表结构之后,读取目标库中与目标数据对应的数据的表结构,获得第二表结构。如果目标数据还没有同步到目标库中,那么目标数据对应的数据的表结构是一个数据为空的表结构。
在一些实施例中,当读取目标数据的表结构时,同时读取目标库中与目标数据对应的数据的表结构,获得第二表结构。
比较模块16,用于将所述第一表结构与所述第二表结构进行比较。
在获得第一表结构和第二表结构之后,将第一表结构与第二表结构进行比较,主要是比较第一表结构与第二表结构是否一致,
发送模块17,用于若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
根据比较结果,判断是否发送通知给指定的接收人,若第一表结构与第二表结构不一致,则发送通知给指定的接收人,若第一表结构与第二表结构一致,则不发送通知给指定的接收人。
在本实施例中,装置1包括:
第一接收模块,用于接收用户输入的修改对象;
第一识别模块,用于识别所述修改对象;
第一生成模块,用于当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
第一发送模块,用于将所述第一表结构脚本发送至所述源库中执行;
第二生成模块,用于当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
第二发送模块,用于将所述第二表结构脚本发送至所述源库中执行。
在接收到通知之后,用户知道源库与目标库存在数据不一致的情况,具体是监控到的目标数据在目标库中不一致,用户需要在源库与目标库之中选择一个作为修改模板修改另一个,用户输入修改对象,接收用户输入的修改对象,对修改对象进行识别,识别修改对象是源库还是目标库,当识别出修改对象为源库时,根据第二表结构,生成修改第一表结构的脚本,获得第一表结构脚本,在获得第一表结构脚本之后,将第一表结构脚本发送至源库中执行,当识别出修改对象为目标库时,根据第一表结构,生成修改第二表结构的脚本,获得第二表结构脚本,将第二表结构脚本发送至源库中执行,进而完成修改。
在一些实施例中,获取模块11包括:
第一检测模块,用于检测所述源库是否存在新增数据;
第一加入模块,用于若检测出所述源库存在新增数据,则将所述新增数据加入待监控列表中;
第一获取模块,用于根据所述待监控列表,获取目标数据的监控指令。
对应地,装置1包括:
第一剔除模块,用于若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
如果第一表结构与第二表结构一致,说明没有必要再对该新增数据进行监控,那么将新增数据从待监控列表中剔除,以及不发送通知给指定的接收人。
综上所述,监控目标数据,读取目标数据的表结构,读取目标库中与目标数据对应的数据的表结构,将两者的表结构进行比较,如果不一致,则发送通知给指定的接收人,以至使接收人及时发现源库与目标库不一致,旨在解决未能及时发现源库与目标库不一致的问题。
如图3所示,本申请实施例中还提供一种计算机设备,该计算机设备可以是服务器,其内部结构可以如图3所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设计的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储监控数据库的方法的模型等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种监控数据库的方法。
上述处理器执行上述监控数据库的方法的步骤:获取目标数据的监控指令,其中所述目标数据存储于源库;根据所述监控指令,监控所述目标数据;根据监控到所述目标数据的监控信息,判断是否满足读取条件;若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;将所述第一表结构与所述第二表结构进行比较;若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
在一个实施例中,上述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取当前监控的时长;
判断所述当前监控的时长是否在预设时长范围内;
若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
在一个实施例中,上述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
从目标数据的修改记录中提取目标数据的修改时间;
判断所述目标数据的修改时间是否在预设时间范围内;
若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
在一个实施例中,上述获取目标数据的监控指令的步骤中,包括:
接收用户对源库中的数据输入的标签;
将已添加所述标签的数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
在一个实施例中,上述获取目标数据的监控指令的步骤中,包括:
检测所述源库是否存在新增数据;
若检测出所述源库存在新增数据,则将所述新增数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
在一个实施例中,上述将所述第一表结构与所述第二表结构进行比较的步骤之后,包括:
若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
在一个实施例中,上述若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人的步骤之后,包括:
接收用户输入的修改对象;
识别所述修改对象;
当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
将所述第一表结构脚本发送至所述源库中执行;
当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
将所述第二表结构脚本发送至所述源库中执行。
本领域技术人员可以理解,图3中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定。
本申请实施例的计算机设备,监控目标数据,读取目标数据的表结构,读取目标库中与目标数据对应的数据的表结构,将两者的表结构进行比较,如果不一致,则发送通知给指定的接收人,以至使接收人及时发现源库与目标库不一致,旨在解决未能及时发现源库与目标库不一致的问题。
本申请一实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现一种监控数据库的方法,具体为:获取目标数据的监控指令,其中所述目标数据存储于源库;根据所述监控指令,监控所述目标数据;根据监控到所述目标数据的监控信息,判断是否满足读取条件;若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;将所述第一表结构与所述第二表结构进行比较;若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
在一个实施例中,上述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取当前监控的时长;
判断所述当前监控的时长是否在预设时长范围内;
若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
在一个实施例中,上述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
从目标数据的修改记录中提取目标数据的修改时间;
判断所述目标数据的修改时间是否在预设时间范围内;
若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
在一个实施例中,上述获取目标数据的监控指令的步骤中,包括:
接收用户对源库中的数据输入的标签;
将已添加所述标签的数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
在一个实施例中,上述获取目标数据的监控指令的步骤中,包括:
检测所述源库是否存在新增数据;
若检测出所述源库存在新增数据,则将所述新增数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
在一个实施例中,上述将所述第一表结构与所述第二表结构进行比较的步骤之后,包括:
若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
在一个实施例中,上述若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人的步骤之后,包括:
接收用户输入的修改对象;
识别所述修改对象;
当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
将所述第一表结构脚本发送至所述源库中执行;
当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
将所述第二表结构脚本发送至所述源库中执行。
本申请实施例的存储介质,监控目标数据,读取目标数据的表结构,读取目标库中与目标数据对应的数据的表结构,将两者的表结构进行比较,如果不一致,则发送通知给指定的接收人,以至使接收人及时发现源库与目标库不一致,旨在解决未能及时发现源库与目标库不一致的问题。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的和实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双速据率SDRAM(SSRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内所作的任何修改、等同替换和改进等,均应包括在本申请的保护范围之内。

Claims (10)

1.一种监控数据库的方法,其特征在于,所述方法包括:
获取目标数据的监控指令,其中所述目标数据存储于源库;
根据所述监控指令,监控所述目标数据;
根据监控到所述目标数据的监控信息,判断是否满足读取条件;
若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;
读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;
将所述第一表结构与所述第二表结构进行比较;
若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
2.根据权利要求1所述的监控数据库的方法,其特征在于,在所述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取当前监控的时长;
判断所述当前监控的时长是否在预设时长范围内;
若所述当前监控的时长在所述预设时长范围内,则判定满足所述读取条件;
若所述当前监控的时长不在所述预设时长范围内,则判定不满足所述读取条件。
3.根据权利要求1所述的监控数据库的方法,其特征在于,在所述根据监控到所述目标数据的监控信息,判断是否满足读取条件的步骤中,包括:
获取所述目标数据的修改记录,其中所述目标数据的修改记录包括目标数据的修改时间;
从目标数据的修改记录中提取目标数据的修改时间;
判断所述目标数据的修改时间是否在预设时间范围内;
若所述目标数据的修改时间在所述预设时间范围内,则判定满足所述读取条件;
若所述目标数据的修改时间不在所述预设时间范围内,则判定不满足所述读取条件。
4.根据权利要求1所述的监控数据库的方法,其特征在于,在所述获取目标数据的监控指令的步骤中,包括:
接收用户对源库中的数据输入的标签;
将已添加所述标签的数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
5.根据权利要求1所述的监控数据库的方法,其特征在于,在所述获取目标数据的监控指令的步骤中,包括:
检测所述源库是否存在新增数据;
若检测出所述源库存在新增数据,则将所述新增数据加入待监控列表中;
根据所述待监控列表,获取目标数据的监控指令。
6.根据权利要求5所述的监控数据库的方法,其特征在于,在所述将所述第一表结构与所述第二表结构进行比较的步骤之后,包括:
若所述第一表结构与所述第二表结构一致,则将所述新增数据从所述待监控列表中剔除。
7.根据权利要求1所述的监控数据库的方法,其特征在于,在所述若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人的步骤之后,包括:
接收用户输入的修改对象;
识别所述修改对象;
当识别出所述修改对象为所述源库时,根据所述第二表结构,生成修改所述第一表结构的脚本,获得第一表结构脚本;
将所述第一表结构脚本发送至所述源库中执行;
当识别出所述修改对象为所述目标库时,根据所述第一表结构,生成修改所述第二表结构的脚本,获得第二表结构脚本;
将所述第二表结构脚本发送至所述源库中执行。
8.一种监控数据库的装置,其特征在于,所述装置包括:
获取模块,用于获取目标数据的监控指令,其中所述目标数据存储于源库;
监控模块,用于根据所述监控指令,监控所述目标数据;
判断模块,用于根据监控到所述目标数据的监控信息,判断是否满足读取条件;
第一读取模块,用于若判定满足所述读取条件,读取所述目标数据的表结构,获得第一表结构;
第二读取模块,用于读取目标库中与所述目标数据对应的数据的表结构,获得第二表结构;
比较模块,用于将所述第一表结构与所述第二表结构进行比较;
发送模块,用于若所述第一表结构与所述第二表结构不一致,则发送通知给指定的接收人。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN201910100437.5A 2019-01-31 2019-01-31 监控数据库的方法、装置、计算机设备和存储介质 Pending CN109828889A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910100437.5A CN109828889A (zh) 2019-01-31 2019-01-31 监控数据库的方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910100437.5A CN109828889A (zh) 2019-01-31 2019-01-31 监控数据库的方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN109828889A true CN109828889A (zh) 2019-05-31

Family

ID=66862142

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910100437.5A Pending CN109828889A (zh) 2019-01-31 2019-01-31 监控数据库的方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN109828889A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110704442A (zh) * 2019-09-29 2020-01-17 深圳无域科技技术有限公司 一种大数据的实时获取方法及装置
CN111125101A (zh) * 2019-12-16 2020-05-08 杭州涂鸦信息技术有限公司 一种数据中心表结构一致性监控方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508833A (zh) * 2011-09-22 2012-06-20 用友软件股份有限公司 数据监控装置及方法
CN107577802A (zh) * 2017-09-25 2018-01-12 山东浪潮商用系统有限公司 一种数据库管理方法及装置
CN108304413A (zh) * 2017-01-13 2018-07-20 北京京东尚科信息技术有限公司 分布式数据仓库监控方法、装置、电子设备和存储介质
CN108388610A (zh) * 2018-02-07 2018-08-10 新华三大数据技术有限公司 数据etl处理方法及装置
CN108572996A (zh) * 2017-03-14 2018-09-25 北京京东尚科信息技术有限公司 数据库表结构的同步方法、装置、电子设备和存储介质
CN108959564A (zh) * 2018-07-04 2018-12-07 玖富金科控股集团有限责任公司 数据仓库元数据管理方法、可读存储介质和计算机设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508833A (zh) * 2011-09-22 2012-06-20 用友软件股份有限公司 数据监控装置及方法
CN108304413A (zh) * 2017-01-13 2018-07-20 北京京东尚科信息技术有限公司 分布式数据仓库监控方法、装置、电子设备和存储介质
CN108572996A (zh) * 2017-03-14 2018-09-25 北京京东尚科信息技术有限公司 数据库表结构的同步方法、装置、电子设备和存储介质
CN107577802A (zh) * 2017-09-25 2018-01-12 山东浪潮商用系统有限公司 一种数据库管理方法及装置
CN108388610A (zh) * 2018-02-07 2018-08-10 新华三大数据技术有限公司 数据etl处理方法及装置
CN108959564A (zh) * 2018-07-04 2018-12-07 玖富金科控股集团有限责任公司 数据仓库元数据管理方法、可读存储介质和计算机设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110704442A (zh) * 2019-09-29 2020-01-17 深圳无域科技技术有限公司 一种大数据的实时获取方法及装置
CN111125101A (zh) * 2019-12-16 2020-05-08 杭州涂鸦信息技术有限公司 一种数据中心表结构一致性监控方法及系统
CN111125101B (zh) * 2019-12-16 2023-10-13 杭州涂鸦信息技术有限公司 一种数据中心表结构一致性监控方法及系统

Similar Documents

Publication Publication Date Title
CN108427613B (zh) 异常接口定位方法、装置、计算机设备和存储介质
CN105303112B (zh) 组件调用漏洞的检测方法及装置
CN108932295A (zh) 主数据库切换控制方法、装置、计算机设备和存储介质
CN110069572A (zh) 基于大数据平台的hive任务调度方法、装置、设备及存储介质
CN109766263A (zh) 自动化测试分析处理方法、装置、计算机设备及存储介质
CN109669717A (zh) 基于部署平台的数据处理方法、装置、设备及存储介质
CN109656205B (zh) 不良品的管控方法和装置、电子设备、可读存储介质
CN112737856B (zh) 链路追踪方法和装置、存储介质及电子装置
CN106878164A (zh) 一种报文传输方法和装置
CN109726134B (zh) 接口测试方法和系统
CN108965383B (zh) 文件同步方法、装置、计算机设备和存储介质
CN112287251B (zh) 线上门店的异常状态检测方法、装置及系统
CN109828889A (zh) 监控数据库的方法、装置、计算机设备和存储介质
CN113163011A (zh) 区块链中修改数据的方法、系统、设备及存储介质
CN109144736A (zh) 一种输出警告消息的方法及装置
CN108376110A (zh) 一种自动检测方法、系统及终端设备
CN113672441A (zh) 对智能设备的测试方法及装置
CN107113199A (zh) 用于分析和处理通信序列的分析装置
CN104182348A (zh) 软件测试方法及装置
CN110243408B (zh) 桥梁监测系统的设备监控方法、装置、设备和存储介质
CN115578111B (zh) 数据溯源方法、装置、电子设备及可读存储介质
CN110009473B (zh) 数据处理方法、装置、设备及存储介质
CN106375551A (zh) 一种信息交互方法、装置及终端
CN114244686B (zh) 通讯故障的检测方法、装置及系统
CN109857647A (zh) 自动化测试方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190531

RJ01 Rejection of invention patent application after publication